[아이티데일리] 스노우플레이크는 오픈 테이블 포맷인 ‘아파치 아이스버그 테이블(Apache Iceberg tables, 이하 아이스버그 테이블)’에서 플랫폼의 주요 기능을 더욱 쉽고 안전하게 사용할 수 있도록 지원한다고 9일 밝혔다.

스노우플레이크 고객들은 아이스버그 테이블을 적용하면서 통합 데이터 플랫폼과 파케이(Parquet) 등의 개방형 상호운용 데이터 형식 모두 사용할 수 있게 됐다. 데이터를 개방형 상호운용 방식으로 저장, 관리, 분석할 수 있고 데이터 복제 없이 스노우플레이크 플랫폼의 강점을 누릴 수 있다. 특히 모든 데이터를 활용해 높은 성능과 유연성으로 고급 인사이트 및 AI 기반 애플리케이션을 더 빠르게 구축, 확장, 공유할 수 있다.

아이스버그 테이블에서 스노우플레이크의 네이티브 테이블 형식과 동일한 컴퓨팅 엔진을 지원한다. 스노우플레이크는 ‘검색 최적화 서비스(Search Optimization Service)’와 ‘쿼리 가속 서비스(Query Acceleration Service)’ 등을 추가해 레이크하우스 분석 기능을 강화했다. 또한 아파치 아이스버그 커뮤니티와 협력해 상이한 데이터 유형도 지원할 예정이다.

스노우플레이크의 높은 보안성과 안전한 데이터 공유 기술도 아이스버그 테이블에 적용됐다. 사용자는 개방형 데이터의 유연성과 보안, 거버넌스로 안전하게 데이터를 관리, 공유, 배포 및 수익화할 수 있다. 신뢰할 수 있는 데이터 복제 및 동기화 기능을 아이스버그 테이블로 확장(현재 프라이빗 프리뷰 단계)해 시스템 장애, 사이버 공격 등에도 데이터를 신속하게 복구하고 운영할 수 있도록 지원한다.

스노우플레이크 크리스티안 클레이너만(Christian Kleinerman) 제품 담당 수석 부사장은 “데이터의 미래는 ‘개방’되면서도 쉬워야 한다”며 “고객은 개방형 포맷과 최고 수준의 성능, 비즈니스 연속성 그 어떤 것도 놓치지 않아야 한다. 스노우플레이크의 최신 아이스버그 테이블 지원을 통해 복잡성은 제거하면서도 엔터프라이즈 수준의 성능과 보안을 유지해 개방형 데이터와 스노우플레이크 플랫폼에 저장된 데이터를 모두 활용할 수 있다”고 말했다.

한편, 스노우플레이크는 데이터 상호운용성과 투명성을 높이고자 오픈소스와 데이터 혁신을 위한 투자에도 적극 나서고 있다. 지난 4년 동안 스노우플레이크가 인수한 기업 중 35%는 오픈 데이터 생태계를 강화하는 기술을 보유한 회사들로, 개방성을 중시하는 스노우플레이크의 철학을 반영한다.

아이스버그 테이블 외에도 실시간 파이프라인을 관리하고 변환 작업을 단순화하는 데이타볼로(Datavolo)의 ‘아파치 NiFi(Apache NiFi)’, 주요 클라우드 제공업체 간 아이스버그 상호운용성과 기업 보안을 보장하는 ‘아파치 폴라리스(Apache Polaris)’, 판다스(pandas) 워크로드를 코드 변경 없이 확장하도록 지원하는 ‘모딘(Modin)’, 사용자가 대화형 웹 애플리케이션, 데이터 대시보드 및 시각화를 쉽게 구축하고 공유하도록 지원하는 ‘스트림릿(Streamlit)’, 모델 성능 모니터링 기능을 강화해 AI의 편향 탐지, 규정 준수, 성능 분석을 제공하는 ‘트루에라(TruEra)’ 등 주요 오픈소스 프로젝트에도 기여하고 있다.