[아이티데일리] 구글 클라우드는 ‘데이터 클라우드 서밋’ 미디어 브리핑에서 데이터 분석, 비즈니스 인텔리전스(BI), 인공지능(AI), 데이터베이스 포트폴리오 전반의 데이터 클라우드 기술 혁신과 신규 파트너 프로그램을 발표했다고 27일 밝혔다.

이번 구글 클라우드가 발표한 주요 기술 혁신은 △빅레이크(BigLake) △스패너 체인지 스트림(Spanner change stream) △버텍스 AI 워크벤치(Vertex AI Workbench) 등이다.

데이터 클라우드를 구현하는 ‘빅레이크’와 ‘스패너 체인지 스트림’

구글 클라우드는 데이터 레이크와 데이터 웨어하우스를 통합한 데이터 레이크 스토리지 엔진 ‘빅레이크(BigLake)’를 프리뷰 버전으로 발표했다. 서로 다른 데이터 레이크와 웨어하우스에서 데이터를 관리하게 되면 사일로(silo)가 발생하기 쉽고, 데이터 이동 시에는 위험도와 비용이 높아진다.

구글 클라우드 측은 “데이터의 제한을 없애는 ‘빅레이크’를 활용하면 기존의 스토리지 형식이나 시스템에 관계없이 데이터를 분석할 수 있다”면서, “기업은 소스에서 데이터를 복제하거나 이동할 필요가 없어 비용 절감 및 효율성 향상의 이점을 누릴 수 있다”고 설명했다.

특히 ‘빅레이크’는 기업이 아파치 스파크(Apache Spark)와 같은 오픈소스 처리 엔진을 비롯해, 구글 클라우드 서비스와 파케이(Parquet) 등 오픈파일 형식을 아우르는 API 인터페이스를 통해 세분화된 액세스 제어 역량을 갖출 수 있도록 지원한다.

‘스패너 체인지 스트림(Spanner change stream)’은 구글 클라우드 DB인 스패너(Spanner)에 새롭게 추가된 기능으로, 고객은 DB에서 삽입, 업데이트, 삭제 등의 변경 사항을 실시간으로 추적할 수 있다. 고객은 스패너에서 ‘빅쿼리’로 변경 사항을 쉽게 복제하고 펍섭(Pub/Sub)을 사용해 다운스트림 애플리케이션 동작을 실행시키거나, 컴플라이언스 준수를 위해 구글 클라우드 스토리지(Google Cloud Storage)에 변경 사항을 저장할 수 있다.

데이터 워크로드의 한계를 극복하는 ‘버텍스 AI 워크벤치’

구글 클라우드는 보다 빠른 AI 모델 개발과 손쉬운 유지보수를 지원하는 ‘버텍스 AI 워크벤치’도 출시했다. ‘버텍스 AI 워크벤치’는 데이터 및 머신러닝 시스템을 단일 인터페이스로 제공해 모든 팀이 데이터 분석, 데이터 사이언스, 머신러닝 전반에 걸쳐 공통된 툴셋을 사용할 수 있도록 지원한다.

‘버텍스 AI 워크벤치’는 구글 클라우드의 ‘빅쿼리’, ‘서버리스 스파크(Serverless Spark)’ 및 ‘데이터프록(Dataproc)’과 네이티브 통합이 가능하며 기존 노트북 환경 대비 5배 빠르게 머신러닝 모델을 개발, 학습 및 배포할 수 있도록 지원한다.

구글 클라우드는 모델 유지보수 관리를 보다 간소화할 수 있도록 ‘버텍스 AI 모델 레지스트리(Vertex AI Model Registry)’에 신규 ‘ML옵스(MLOps)’ 기능을 프리뷰 버전으로 선보였다. ‘버텍스 AI 모델 레지스트리’는 빅쿼리 ML 모델을 포함한 머신러닝 모델의 탐색, 사용 및 관리를 위한 중앙 저장소를 제공한다.

데이터 클라우드 파트너사와 협력 강화

구글 클라우드는 파트너사와의 협력도 강화했다. 현재 700개 이상의 SW 파트너사가 구글의 데이터 클라우드를 이용해 애플리케이션을 구현하고 있다. 블룸리치, 에퀴팩스, 엑사빔, 퀀텀 메트릭 및 줌인포 등 여러 파트너사들이 빅쿼리 기반 구축(Built with BiqQuery) 이니셔티브를 기반으로 데이터 클라우드 기능을 이용하며 전담 엔지니어링 팀, 공동 마케팅 및 시장 출시와 관련한 지원을 제공받고 있다.

구글 클라우드의 고객들은 빅쿼리와 같은 제품에 긴밀하게 통합되고 최적화된 파트너 솔루션을 원한다. 이러한 고객 수요에 대응하고자 구글 클라우드는 ‘구글 클라우드 레디 - 빅쿼리(Google Cloud Ready - Big Query) 프로그램’을 발표했다. 이 프로그램은 파이브트란, 인포매티카, 태블로 등 파트너 솔루션이 핵심 기능 및 상호호환성 요건을 만족하는 지 검증한다. 이를 통해 고객은 새로운 툴을 평가하는 데 소요되는 시간을 상당히 절감할 수 있다.

구글 클라우드 장화진 한국지사장은 “오늘날 데이터의 양과 유형, 워크로드, 그리고 사용자까지 폭발적으로 증가하면서 전통적인 데이터 아키텍처로 데이터가 가진 진정한 가치를 실현하는 것은 어려워졌다”며, “구글 클라우드는 오늘 발표한 데이터 클라우드의 기술 혁신을 통해 클라우드 환경에서 데이터의 원활한 활용을 지원하고, 고객이 데이터 기반의 비즈니스 가치를 실현함으로써 성공적인 디지털 트랜스포메이션을 추진할 수 있도록 최선을 다할 것”이라고 말했다.