C-公布Eval中文大模型排名 云从科技位列百亿模型第一。

商界观察
2023-08-23

上证报中国证券网讯(记者 宋薇萍)8月21日,云从科技正式发布1.5版坦然大模型。本版本包括10亿、100亿、1000亿模型规格,实际测量性能在全球大模型综合测试中进行评价。(C-Eval)在百亿级中排名第一,总排名第四。

 

 

C-Eval是由清华大学、上海交通大学和爱丁堡大学联合打造的中文语言模型综合考试评价集,包括52个不同学科和4个难度等级(初中、高中、大学和专业)的13948道选择题,是判断模型潜力最权威的模型之一。

 

据报道,为解决大模型落地问题,1.5版本的重点是参数为130亿(13B)的行业大模型。这种模型是从1000亿元的大模型中蒸馏出来的,52类测试指标包括44类超过ChatGPT。、超过GPT-4的29类,距离坦然大模型正式发布才过去两个多月。

 

与此同时,冷静大模型1.5版本针对行业大模型进行了有针对性的改进,提高了金融、政务、零售、交通、安全、能源、教育、医疗、娱乐等行业的行业数据比例,重点培养了行业领域的下游任务。与此同时,模型前后文的长度(Context length)更加完成了32K Tokens,超过了世界上大多数模型的2k到8k水平。与此同时,坦然大模型对中文编码器进行了深度提升,一个中文汉字的平均值仅占0.7Tokens,这样就使得1.5版本支持的大模型前后文长度超过45,000字。

 

云从科技表示,未来将继续加大R&D投资,不断优化AI模型,促进人工智能与实体经济的协调发展,深入参与数字中国建设,为现代化发展注入新动能。

本文仅代表作者观点,版权归原创者所有,如需转载请在文中注明来源及作者名字。

免责声明:本文系转载编辑文章,仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布,请及时与我们联系进行审核处理或删除,您可以发送材料至邮箱:service@tojoy.com