人工智能(AI)语言数据专业企业Flitto于12日表示,已向用于比较和评估韩语超大规模语言模型性能的“Open Ko-LLM排行榜”提供基准数据集。
Open Ko-LLM排行榜是由韩国智能信息社会振兴院(NIA)与Upstage共同构建并运营的韩语大规模语言模型(LLM)性能评估平台。该平台为国内企业和研究机构提供登记LLM并开展性能竞争的环境,为韩国版人工智能开发和自然语言处理技术的发展作出贡献。
Flitto作为运营Open Ko-LLM排行榜的Upstage的合作伙伴,以韩语形式提供了可用于评估▲常识推理与语境理解能力 ▲数学推理与计算能力等的基准数据集。通过新增常识推理和数学推理两项评估指标,使其与在国际上获得认可的Hugging Face“Open LLM排行榜”的评价标准接轨,对韩国国内AI生态系统的发展具有重要意义。
Flitto以参与数据集构建为契机,今后将加快构建用于评估和提升韩语大规模语言模型性能的高质量语言数据。公司正与Upstage合作构建可用于评估已应用于商业领域的韩语语言模型的基准数据集,并计划于年内通过“Open Ko-LLM”追加公开。
Flitto代表Lee Jeongsu表示:“通过提供基准数据集,使韩语大规模语言模型排行榜具备了国际通行的评价标准,意义重大。今后将以多年积累的语言数据构建技术能力为基础,为韩国版人工智能生态系统的发展投入更多力量。”
Flitto于上月9日与AI技术企业Upstage签署了为构建AI语言数据而开展合作的业务协议。双方决定围绕泰语、日语、越南语、老挝语、柬埔寨语等在亚洲地区相对缺乏语言数据的语种展开数据集构建合作。
版权所有 © 阿视亚经济 (www.asiae.co.kr)。 未经许可不得转载。