小米大语言模型MiLM-6B首次现身!同参数量级排名第一

快科技8月11日消息,近日,小米的大语言模型MiLM-6B首次现身C-eval、CMMLU两大AI模型评测榜单。

截至本文成稿,MiLM-6B在C-eval总榜单排名第10、同参数量级排名第1,在CMMLU中文向大模型排名第1。

根据C-eval给出的信息,MiLM-6B模型在各个测试科目中的平均成绩如下:

小米大语言模型MiLM-6B首次现身!同参数量级排名第一

具体各科目成绩上,在STEM(科学、技术、工程和数学教育)全部20个科目中,计量师、物理、化学、生物等多个项目获得了较高的准确率。

而在10个社会科学科目中,该模型在教育学和地理外的所有科目,都获得了较为理想的准确率。

人文科学的11个科目中,MiLM-6B则在历史与法律基础上有着不错的准确率表现。

可以看出,MiLM-6B模型目前已经在大多数科目中表现出了相对良好的准确度,但在诸如法学、数学、编程、概率论、离散数学等科目上的表现依旧有明显进步空间。

本文内容及图片均整理自互联网,不代表本站立场,版权归原作者所有,如有侵权请联系admin#jikehao.com删除。
(0)
极客号的头像极客号
上一篇 2023年 8月 11日
下一篇 2023年 8月 11日

相关推荐

合作联系:1152QQ041010