오픈 코-LLM 리더보드 부문별 1위로 미니레코드·사람과 숲 선정

[아이티데일리] 한국지능정보사회진흥원(NIA, 원장 황종성)과 업스테이지(대표 김성훈)는 지난 11일 NIA 서울사무소에서 ‘11월, 이달의 LLM’ 시상식을 개최하고 ‘오픈 코-LLM(Open Ko-LLM) 리더보드’의 모델 2개를 선정했다고 밝혔다.

NIA와 업스테이지가 공동으로 운영하는 ‘오픈 코-LLM 리더보드’는 허깅페이스의 LLM 리더보드(영어 버전)를 벤치마크해 새로 구축한 한국어 버전으로 지난 9월 27일 오픈했다. 운영 3개월만에 600개 이상의 LLM이 등록됐으며, AI 학계와 산업계에서 한국어 LLM 성능을 측정하는 주요한 벤치마크로 자리매김하고 있다.

NIA와 업스테이지는 지난 11일 NIA 서울사무소에서 공동으로 운영 중인 ‘오픈 코-LLM 리더보드’의 우수 개발자 대상의 ’11월 이달의 LLM 시상식을 개최했다. (왼쪽부터) NIA 이용진 본부장, 미니레코드 김명군 팀장, 배환희 매니저, NIA 황종성 원장, 미디어그룹사람과숲 한윤기 대표, 업스테이지 최홍준 부사장, 마커AI 정철현 대표.
NIA와 업스테이지는 지난 11일 NIA 서울사무소에서 공동으로 운영 중인 ‘오픈 코-LLM 리더보드’의 우수 개발자 대상의 ’11월 이달의 LLM 시상식을 개최했다. (왼쪽부터) NIA 이용진 본부장, 미니레코드 김명군 팀장, 배환희 매니저, NIA 황종성 원장, 미디어그룹사람과숲 한윤기 대표, 업스테이지 최홍준 부사장, 마커AI 정철현 대표.

이번 ‘이달의 LLM’은 모델 파라미터 크기(7B 이하, 7B 초과)별 두 부문으로 진행했으며, 7B 이하 부문은 50.47점을 기록한 ‘미니레코드’가, 7B 초과 부문은 52.69점을 기록한 ‘미디어그룹사람과숲-마커AI 연구컨소시엄’이 차지했다.

특히 ‘미디어그릅사람과숲-마커AI 연구컨소시엄’의 LLM은 부문과 상관없이 리더보드 가장 높은 점수로 전체 1위를 기록했다.

선정 기업 외에도 KT, 롯데정보통신 등 다양한 AI 기업이 리더보드에 참여해 경쟁을 통해 모델 성능을 평가하고 개선해 나가고 있다.

아울러 NIA와 업스테이지는 신규 구축한 LLM용 데이터를 기반으로 평가 데이터를 추가하는 등 리더보드 활성화를 위해 지속 협력할 계획이다.

NIA 황종성 원장은 “오픈 코-LLM 리더보드 신설이 LLM 연구개발 촉진의 도화선이 된 것 같아 뜻깊다”며 “앞으로도 국내 기업의 LLM 역량 강화를 위해 공공에서의 지원을 아끼지 않겠다”고 밝혔다.

시상식에 참여한 ‘미니레코드’와 ‘미디어그룹사람과숲’은 “공공의 지원 덕분에 자사의 LLM 성능과 기술력을 대외적으로 입증하는 기회가 주어져 기쁘고 감사하다”고 소감을 밝혔다.

저작권자 © 아이티데일리 무단전재 및 재배포 금지