SK텔레콤이 ARM, 리벨리온과 함께 CPU와 NPU를 결합한 AI 서버 솔루션 개발에 나선다. 저전력·고효율 추론 인프라를 확보하겠다는 전략이다.
SK텔레콤은 ARM, 리벨리온과 차세대 AI 인프라 혁신을 위한 전략적 파트너십(MOU)을 체결했다고 9일 밝혔다.
이번 협약을 통해 3개사는 ARM이 새롭게 출시한 'ARM AGI CPU'와 리벨리온이 올해 3분기 출시 예정인 '리벨카드(RebelCard)'를 서버에 같이 탑재해 AI 추론 성능을 높일 수 있는 설루션을 공동 개발하고 SK텔레콤의 AI데이터센터에서 실증하기로 했다.
이번 협력의 배경에는 AI 산업이 AI 모델을 만드는 '학습(Training)'에서 실제 서비스를 제공하는 '추론(Inference)'으로의 패러다임 변화가 있다. 이에 따라 AI 인프라의 핵심과제도 '학습'을 위한 막대한 연산 능력보다는 얼마나 적은 전력으로 얼마나 빠르고 저렴하게 AI 서비스를 제공할 수 있느냐로 변하고 있다. 추론은 365일 쉬지 않고 작동해야 되기 때문에 전력 효율이 곧 비용 경쟁력과 직결된다.
이번 솔루션에 적용되는 ARM AGI CPU는 ARM이 직접 생산에 나선 데이터센터용 프로세서다. AI 추론 서비스에 최적화된 것이 특징이다. 리벨리온의 리벨카드는 대규모 AI 추론에 특화된 NPU다. 두 칩을 한 서버 안에 결합하면 성능과 전력 효율을 동시에 높이고 운영 비용을 낮출 수 있다는 게 SK텔레콤 판단이다.
이재신 SK텔레콤 AI 사업개발 담당은 “추론에 최적화된 인프라와 독자 파운데이션 모델 A.X K1을 결합한 풀 패키지를 제공함으로써 AI 데이터센터 경쟁력을 더욱 강화해 나가겠다”고 말했다.
에디 라미레즈 ARM 클라우드 AI 사업부 GTM 부사장은 “AI 추론의 급속한 성장은 대규모 배포에 최적화된 새로운 데이터센터 인프라 수요를 촉진하고 있다”며 “SK텔레콤, 리벨리온과 같은 파트너는 ARM AGI CPU를 구축하고 AI 추론 인프라를 현대화하는 데 있어 중요한 역할을 하고 있다”고 전했다.
오진욱 리벨리온 CTO는 “리벨리온은 압도적인 성능과 전력 효율을 갖춘 리벨카드와 풀스택 소프트웨어 경쟁력을 바탕으로 차세대 AI 데이터센터를 지탱하는 핵심 축을 담당하게 됐다”며 “AI 특화 인프라 구축을 위해 각 분야 전문가들이 원팀으로 뭉친 이번 협력은 업계에서도 매우 유의미한 선례가 될 것으로 기대한다”고 강조했다.
남궁경 기자 nkk@etnews.com
