Upstage与NIA开设韩语AI性能评估平台

Upstage与韩国智能信息社会振兴院（NIA）携手打造一个可以评估和比较韩语大规模语言模型（LLM）性能的排行榜。

Upstage于25日表示，将与NIA共同主办韩语LLM排行榜“Open Ko-LLM Leaderboard”，并于本月27日上线。

View original image

Open Ko-LLM Leaderboard是一个任何人都可登记自己开发的韩语LLM模型并与其他模型竞争的公开平台。其并非简单翻译由Hugging Face运营的Open LLM Leaderboard的既有数据，而是自主构建了反映韩语特性和文化的高质量数据，因此具备“韩语特化排行榜”的优势。

平台新增了考察常识生成能力的“常识生成”指标，以便评估韩语LLM模型的高性能与多样性。“常识生成”数据集由Upstage与高丽大学Im Heeseok教授研究团队合作构建，题目涵盖历史歪曲、幻觉错误、形态素错误、不规则活用错误、仇恨言论等广泛类型。通过这一指标，测量人工智能（AI）生成的结果是否符合韩语使用者应当具备的一般常识。

必读新闻

三星放缓之际猛然追上…中国D램一年内转亏为盈

• “大多数民众并不想要的战争”……美国人为油价白白多花了60万亿韩元
• 龙仁公寓惊案：30多岁男子殴打七旬父亲后坠楼身亡
• 三星工会成员称“要痛快把韩国综指推到5000点”……Telegram发言惹争议
• “这种东西为什么要做？”蔓延韩国的诡异现象…外媒发出警示

Upstage代表Kim Seonghoon表示：“能够上线有助于提升韩语LLM竞争力并进一步提高研究水平的Open Ko-LLM Leaderboard，我感到非常高兴。今后也将继续努力，拓展并促进韩国AI生态系统的发展。”

版权所有 © 阿视亚经济 (www.asiae.co.kr)。 未经许可不得转载。