AI 모델 훈련 및 추론 위해 OCI와 OCI 슈퍼클러스터 적용

[아이티데일리] 오라클은 인공지능(AI) 혁신기업들이 OCI AI 인프라스트럭처(OCI AI Infrastructure)와 OCI 슈퍼클러스터(OCI Supercluster)를 활용해 생성형 AI 애플리케이션용 거대언어모델(LLM) 훈련 등 실제 서비스 환경에서 사용 가능한 AI의 개발과 배포를 지원한다고 27일 밝혔다.

트웰브 랩스(Twelve Labs), 모달(Modal), 수노(Suno), 투게더 AI(Together AI) 등 수많은 AI 기업들이 대규모 AI 훈련 및 추론을 위해 OCI AI 인프라를 활용하고 있다.

AI 관련 수요가 급속도로 지속적으로 늘어나는 가운데, AI 기업들은 필요에 따라 GPU 인스턴스를 신속하고 경제적으로 확장해 주는 안전하고 안정적인 고성능 클라우드 및 AI 인프라를 필요로 하고 있다. OCI AI 인프라스트럭처를 통해 AI 기업들은 머신러닝(ML), 이미지 처리, 모델 훈련, 추론 연산, 물리 기반 모델링 및 시뮬레이션, 대규모 병렬 HPC 애플리케이션을 위한 고성능 GPU 클러스터를 활용할 수 있게 된다.

OCI AI 인프라스트럭처의 OCI 컴퓨트 가상머신(OCI Compute virtual machines) 및 베어메탈 GPU 인스턴스는 컴퓨터 비전, 자연어 처리, 추천 시스템 등을 위한 애플리케이션을 구동할 수 있다. OCI 슈퍼클러스터는 레이턴시가 극히 낮은 클러스터 네트워킹, HPC 스토리지, OCI 컴퓨트 베어메탈 인스턴스를 제공해 LLM 등 크고 복잡한 모델을 대규모로 훈련하게 해 준다.

먼저 서버리스 GPU 플랫폼 기업인 모달은 고객이 필요한 인프라를 구성 또는 설정할 필요 없이 생성형 AI 모델, 대규모 배치 작업, 작업 쿼리를 실행할 수 있게 해 준다. 전 세계 데이터센터로의 신속한 확장을 지원하기 위해 모달은 고객이 보다 신속하고 비용 효과적인 방식으로 추론 작업을 할 수 있도록 OCI 컴퓨트(OCI Compute) 베어메탈 인스턴스를 활용했다.

수노는 생성형 음악 제작 기업으로, 수노의 주력 제품은 몇 초 만에 현실적이고 개인화된 음악을 생성해 낸다. 수노는 독자적인 기계학습 모델을 훈련시키고, 차세대 생성형 음악 모델에 대해 늘어나는 수요를 지원하기 위해 OCI 슈퍼클러스터(OCI Supercluster)를 선택했다.

투게더 AI는 생성형 AI 모델의 추론 및 훈련을 위해 가장 빠른 속도의 클라우드 플랫폼을 제공하는 연구 중심 AI 기업이다. 투게더 AI는 강력한 성능을 비롯해 내장형 보안, 최상의 엔지니어링 지원 서비스 등을 이유로 OCI를 선택했다.

대한민국의 AI 스타트업인 트웰브 랩스는 멀티모달 비디오 이해를 위한 파운데이션 모델을 구축하는 회사다. 사용자들은 자연어를 사용해 특정 장면에 대한 비디오를 검색하고, 프롬프팅을 통해 비디오에 대한 정확하고 통찰력 있는 텍스트를 생성할 수 있으며, 맞춤형 카테고리를 기반으로 비디오를 자동 분류할 수 있다. 트웰브 랩스는 OCI 컴퓨트 베어메탈 GPU와 OCI가 제공하는 노드 간 고대역폭 덕분에 대규모 모델들을 고속으로 훈련시킬 수 있게 됐다.

트웰브 랩스 이재성 창립자 겸 CEO는 “OCI AI 인프라스트럭처를 통해 우리는 모델을 품질 또는 속도에 대한 타협 없이 대규모로 훈련시킬 수 있게 됐다”며 “OCI는 비디오 이해를 더욱 고도화하기 위해 필요한 성능, 확장성, 클러스터 네트워킹을 제공하고, 동시에 AI 모델 배포에 드는 시간과 비용을 크게 줄여준다”고 말했다.

저작권자 © 아이티데일리 무단전재 및 재배포 금지