科学技术信息通信部推动的‘独立人工智能(AI)基础模型(独立AI模型)’项目第二阶段评估已完成。参与评估的四个团队模型均被全球AI研究机构列为‘值得关注的模型’,引发了对下一阶段入围团队的高度关注。
据业内消息,独立AI模型第二阶段评估结果预计将在本周公布。本次评估中,LG AI研究院、SK电信、Upstage以及通过追加征集选出的Motif Technologies四个团队展开了竞争。
根据科技部的数据,这四个团队在今年上半年开发的模型均被美国非营利AI研究机构Epoch AI列为值得关注的模型。Epoch AI根据模型的学习运算量、性能和技术重要性等因素筛选出对AI发展有影响的模型。
去年,被Epoch AI列为值得关注的模型中,美国有59个,数量最多,其次是中国35个,韩国8个。今年以来,产生该模型的国家包括美国、中国和韩国等三个国家。
根据Hugging Face最近一个月的下载数据,Upstage的‘Solar Open 2’下载量为25870次。Motif的测试版‘Motif-3 Beta’下载量为5062次,SK电信的‘A.X K2’为2844次,LG AI研究院的‘K-Exa元 2.0’为1462次。
全球研究机构的评估和开源市场的反应将如何影响第二阶段评估结果也备受关注。曾在第一阶段评估中各项均获第一的LG AI研究院能否保持领先,还是新发布模型的SK电信和Upstage会追赶,亦或是通过追加征集加入的Motif能否进入下一阶段,都是外界关注的焦点。
特别是此次首次引入了200名公众直接使用模型进行性能评估。若模型间的基准分数差距不大,普通用户在不同情况下使用模型时的感受可能成为评估结果的关键变量。
软件政策研究所研究员봉강호表示:“在基准测试中取得高分并不意味着用户的便利性和使用体验一定良好。如果200名用户各自使用模型进行适合自己的不同案例,并反映出他们的体验,那么就能得出相当合理的结果。”
※ 本报道经人工智能(AI)系统翻译与编辑。


