韩语性能强化轻量模型
通过Hugging Face以开源形式发布

SKT发布自主研发LLM“A.Dot X 3.1 Lite” View original image

SK电信表示,已于11日通过 Hugging Face 以开源形式正式公开其以纯自研技术构建的大规模语言模型(LLM)“A.X 3.1 Lite”。


“A.X 3.1 Lite”是一款基于70亿(7B)参数、可在多种移动设备上实现最优品质的轻量级大模型。其特点在于,SK电信以“From Scratch”方式,自行完成了从模型设计到训练的全部流程。


SK电信称,该模型是在此前用于 A.通话摘要功能的 A.X 3.0 Lite 基础上进行性能升级的版本。作为一款韩语特化模型,它在韩语语言理解基准测试 KMMLU 中取得了61.70分,在韩国文化与语言理解度评估 CLIcK 中取得了71.22分,整体性能达到同级大模型 A.X 4.0 Lite 的约102%。


SK电信计划于本月内公开参数规模为340亿的 A.X 3.1 模型。公司拟通过并行推进 A.X 3 系列(基于 From Scratch)和 A.X 4 系列(基于大规模训练)的“双轨战略”,为不同企业的人工智能应用环境提供最优选择。


一直持续积累人工智能模型开发经验的 SK电信,继2019年公开 KoBERT、2020年公开 GPT2 韩语版本之后,已在 A.服务和通话摘要功能等场景中应用自研模型。今后,公司计划通过扩充图形处理器(GPU)资源和提升模型性能,进一步增强人工智能生态的自立性和技术竞争力,并将参与政府推进的“自主人工智能基础模型开发项目”。



负责 SK电信基础模型业务的 Kim Taeyun 表示,将“以韩语大模型开发能力为基础,努力为提升国家人工智能竞争力作出贡献”。


本报道由人工智能(AI)翻译技术生成。

版权所有 © 阿视亚经济 (www.asiae.co.kr)。 未经许可不得转载。