토종 오픈 LLM 순위 나온다…업스테이지·NIA 업무협약

국내 인공지능(AI) 스타트업 업스테이지는 5일 한국지능정보사회진흥원(NIA)과 한국형 오픈 대규모언어모델(LLM) 리더보드를 구축하기 위해 'AI 허브 데이터 활용 업무협약'을 체결했다고 밝혔다.

이번 협약에 따라 업스테이지는 NIA의 인공지능 학습용 데이터 제공 플랫폼인 AI 허브에서 제공하는 다양한 분야의 한국어 데이터를 활용해 LLM 리더보드를 이달 내 구축할 계획이다.

왼쪽부터 김성훈 업스테이지 대표와 황종성 NIA 원장. [사진제공=업스테이지]

업스테이지가 구축할 리더보드는 오픈 LLM 모델을 평가하는 허깅페이스 오픈 LLM 리더보드의 한국 버전이다. 한글 기반으로 개발된 LLM들의 성능을 평가하고 순위를 매기는 플랫폼인 것. 기존의 추론과 상식 능력, 언어 이해 종합능력 및 환각 현상 방지 등 4가지 지표에 NIA와 학계 등 신뢰할 만한 데이터를 기반으로 윤리, 전문가 지식 등 추가 기준을 개설, 모델을 평가한다.

NIA는 이번 협력을 통해 업스테이지의 1T 클럽에도 가입하고 양질의 데이터를 제공키로 약속했다. 업스테이지는 지난달 1T 클럽을 출범해 텍스트, 책, 기사 등 다양한 형태의 1억단어 이상의 한국어 데이터에 기여하는 파트너들과 협력하고 있다.

김성훈 업스테이지 대표는 "NIA와의 협약을 통해 한국어 데이터 부족 문제를 해결하고, 국내외 시장에서 경쟁력 있는 인공지능 플랫폼을 제공할 수 있게 됐다"며 "NIA와 함께 한국형 Open LLM 리더보드를 통해 국내 LLM들의 성능과 혁신성을 증명하고, 인공지능의 발전과 보급에 노력하겠다"고 말했다.

황종성 NIA 원장은 "글로벌에서도 인정받는 AI 스타트업 업스테이지와의 협약을 통해 AI 허브의 데이터가 국내외 인공지능 시장에서 활용될 수 있게 됐다"며 "한국형 Open LLM 리더보드를 통해 국내 LLM들의 수준과 다양성을 높이고 인공지능 생태계 구축에 더욱 힘쓰겠다"고 밝혔다.

최유리 기자 yrchoi@asiae.co.kr