한국전자통신연구원(ETRI)은 서버 간 메모리를 공유해 물리적 용량 한계를 극복하는 소프트웨어 'EMP'를 개발하고, 이를 미국 서던캘리포니아대학교의 대규모 고성능컴퓨팅 클러스터에 적용해 시범 서비스를 시작했습니다.
이 기술은 데이터센터 내 유휴 메모리를 초고속 네트워크로 연결해 필요한 서버에 할당함으로써, 개별 서버 용량을 초과하는 대규모 연산 작업을 효율적으로 수행할 수 있게 해줍니다.
이번 실증은 국내 시스템 소프트웨어의 실용성을 글로벌 환경에서 입증한 사례로, 향후 AI 서비스 확산에 따른 메모리 부족 문제 해결과 데이터센터 자원 최적화에 기여할 것으로 기대됩니다.
![]() |
| 한국전자통신연구원 차승준 책임연구원과 김태훈 AI컴퓨팅시스템연구실장, 고광원 AIDC연구본부장이 메모리를 공유해 효율적으로 활용할 수 있는 프로그램을 소개하고 있다. (사진=ETRI 제공) |
최근 생성형 AI 서비스가 확산되면서 학습과 추론에 필요한 서버 메모리 수요가 빠르게 늘고 있다. 메모리 공급이 수요를 따라가지 못하고 가격 상승까지 이어지면서, 데이터센터를 운영하는 기업과 연구기관의 메모리 확보와 증설 부담도 커지고 있다.
반면 시스템 전체로 보면 사용되지 않는 메모리 자원이 상당 부분 존재한다. ETRI가 개발한 EMP는 여러 서버에 분산된 메모리를 초고속 네트워크로 연결해 필요한 서버에 확장 메모리로 제공하는 시스템 소프트웨어다. 이를 통해 개별 서버의 메모리 용량에 따른 제약을 줄이고, 데이터센터 전체의 메모리 자원을 효율적으로 활용할 수 있다.
실제 성능 검증에서는 약 1.8TB의 메모리가 필요한 유전체 분석 작업을 448GB의 로컬 메모리를 갖춘 서버에서 실행하는 데 성공했다. 서버 자체 메모리는 전체 필요 용량의 약 25%에 불과했지만, 인피니밴드(InfiniBand) 초고속 네트워크로 연결된 다른 서버의 메모리를 활용해 부족한 용량을 확보했다.
이번 미국 서던캘리포니아대 첨단연구컴퓨팅센터 적용은 국내 연구진이 개발한 시스템 소프트웨어를 미국의 대규모 고성능컴퓨팅 운영환경에 적용했다는 점에서 의미가 크다. 연구실 수준의 기술 검증을 넘어 실제 데이터센터에서 다수의 연구자가 사용하는 컴퓨팅 환경을 대상으로 기술의 실용성을 확인할 수 있는 기반을 마련했기 때문이다.
ETRI 고광원 AIDC연구본부장은 "AI 확산으로 메모리 수요가 급증하면서 데이터센터의 메모리 확보 및 증설 부담이 커지고 있다"며 "이번 기술은 기존 서버의 유휴 메모리를 공유해 개별 서버의 메모리 용량 한계를 극복하고 대규모 연산을 수행할 수 있도록 하는 것"이라고 말했다. 이어 "미국 대규모 데이터센터에서 확보한 실증 경험을 바탕으로 국내 AI 데이터센터의 자원 활용 효율을 높이는 핵심 시스템 소프트웨어로 발전시키겠다"고 밝혔다.
임병안 기자
중도일보(www.joongdo.co.kr), 무단전재 및 수집, 재배포 금지






