G05-7182802122

kt클라우드, 슬라이싱 GPU 기반 인프라 서비스 ‘AI SERV’ 출시

NSP통신, 이복현 기자, 2023-10-17 08:38 KRX7
#kt클라우드 #슬라이싱GPU기반 #AISERV

AI 서비스 제공 위해 경제성, 성능, 호환성 등 강점 살린 AI 추론용 혁신적 인프라

NSP통신- (사진 = kt클라우드)
(사진 = kt클라우드)

(서울=NSP통신) 이복현 기자 = kt클라우드(대표 윤동식)는 슬라이싱 기술을 GPU(Graphic Processing Unit, 그래픽처리장치)에 적용한 AI 추론 전용 인프라 서비스 ‘AI SERV’를 출시했다.

kt클라우드가 이번에 출시한 AI SERV는 AI 개발, 학습을 마치고 AI 서비스를 제공 중인 AI 전문기업, 스타트업 등이, 고성능 GPU 인프라를 각 서비스에 필요한 만큼만 분할하여 최적의 양을 사용할 수 있는 것이 특징이다.

또 비용 효율성뿐 아니라 성능, 호환성 등 추론 영역에서 가장 중요한 조건까지 갖추고 있어 추론형 AI 인프라 시장의 혁신을 이끌 것으로 기대된다.

G03-9894841702

kt클라우드의 AI SERV에 적용된 슬라이싱(Slicing) 기술은 기존에 한 장으로 제공되던 GPU 서비스를 5분할해 0.2장 단위로 제공한다. 최소 사용 가능한 GPU 단위가 작아진 만큼 필요한 때 필요한 만큼의 인프라를 사용할 수 있어 가격 부담이 줄어듦은 물론, 다양한 상황에 맞춰 탄력적이고 가변적인 활용이 가능하다.

또 기존의 슬라이싱 기술은 분할된 단위의 GPU에서 성능 열화가 발생할 수 있다는 단점이 있었지만, AI SERV는 슬라이싱 분할에도 성능 열화 없이 인프라를 100% 활용할 수 있다는 강점까지 갖췄다.

kt클라우드의 AI SERV는 타사의 유사 서비스 대비 성능 및 호환성 측면에서도 강점을 보인다. 엔비디아 A100 칩을 활용, 경쟁사의 최신 추론형 인프라 서비스와 비교해도 최소 두 배 빠른 연산 속도를 자랑한다.

kt클라우드는 향후 AI SERV에 사용자의 손쉬운 인프라 확장 지원을 위한 모니터링 및 컨테이너 이미지 클로닝(Cloning) 기능 등을 추가하는 한편, 부하 발생시 인프라를 자동 확장시키는 ‘오토 스케일링’ 기능을 도입하는 등 서비스를 지속적으로 고도화해 나갈 계획이다.

한편 kt클라우드는 향후 기업 대상의 NPU 인프라 서비스, 학습용 GPU 신규 서비스 등을 출시하며 ▲저비용 ▲고성능 ▲고효율의 AI 인프라 서비스 라인업을 강화한다는 방침이다.

ⓒ한국의 경제뉴스통신사 NSP통신·NSP TV. 무단전재-재배포 금지.