新华社研究院发布国产大模型报告:讯飞星火第一,百度文心第二
2023-08-15 16:30:04 来源:富途牛牛
自ChatGPT引发人工智能投资热潮以来,国产大模型如雨后春笋般爆发,截至7月初,国内10亿级参数规模以上的人工智能大模型已超80个。在这种新的趋势下,国产大模型该如何选择?哪家大模型最强大?
8月12日,新华社研究院中国企业发展研究中心发布《人工智能大模型体验报告2.0》(以下简称《报告》),对百度文心一言、阿里通义千问等时下最火热的国产通用大模型应用进行了测评。
(资料图)
本次测评共设计500道随机题目,对标接受过高等教育的人类水平、更强调对产业和生活的实际价值,并严格按基础能力指数、智商指数、情商指数、工具提效指数四大测评维度进行权重设计,以保证整个测评过程的严谨性。
最终结果稍稍令人意外,讯飞星火以总分1013分位列本次测评榜首,在四大评测维度中的智商指数和工具提效指数两个维度获得第一;$百度集团-SW(09888.HK)$文心一言和$商汤-W(00020.HK)$商量分别位列第二和第三。
《报告》称,讯飞星火具有7大核心能力,即文本生成、语言理解、知识问答、逻辑推理、数学能力、代码能力、多模态能力。拥有跨领域的知识和语言理解能力,能够基于自然对话方式理解与执行任务。
在基础能力部分,人类与AI之间的差距并不显著。百度文心一言表现在模型中最为抢眼;商汤商量、智谱AI hatGLM、360智脑表现优良,讯飞星火、阿里通义千问、澜舟科技Mchat、昆仑万维天工表现尚佳。
在智商评估方面,人类仍然具有明显优势,分数也达到最高。在所有测评的模型中,讯飞星火、智谱A-ChatGLM并列第一;百度文心一言、昆仑万维天工表现优良。
在情商方面,AI与人类之间的差距最为明显。《报告》称,目前尚未观察到AI具备情绪感知能力的明显迹象。尽管如此,商汤商量还是展现了超越同行的高情商,以346分位列第一,百度文心一言和澜舟科技·Mchat分别位列第二和第三。
最后,在工作效率提升方面,《报告》认为, AI对人类提供了有力的支持,AI的处理速度远远超过人类。然而,尽管AI具有高速度和高效率的优势,但在某些复杂和具有创新性的任务中,人类的智慧和想象力仍然具有无法替代的作用。测评结果显示,讯飞星火以350分排名第一并遥遥领先,百度文心一言和商汤商量分别位列第二和第三。
《报告》认为,与2023年6月相比,当前中国大模型产品进步显著。但与接受过高等教育的人类相比,大模型在智商、情商等方面还存在一定程度差距。虽然在不同领域中,AI和人类表现出不同的优劣势,但在整体上,AI大模型的发展为人类工作和生活的提质增效带来了重要的积极影响,大模型正在加速走进生活、走进产业。
编辑/ruby
关键词:
[责任编辑:]
相关阅读
- (2023-08-15)新华社研究院发布国产大模型报告:讯飞星火第一,百度文心第二
- (2023-08-15)国家能源局:7月份全社会用电量同比增长6.5%
- (2023-08-15)建研设计:公司无自主研发的设计软件,但建有自己的数据存储档案库,主要服务于建筑设计与咨询主营业务
- (2023-08-15)科思科技2023年上半年净利-1.19亿 亏损增长117.36%
- (2023-08-15)北京商报评论:A股也可以考虑取消印花税
- (2023-08-15)西班牙多手段应对夏季酷暑
- (2023-08-15)7月份全社会用电量8888亿千瓦时 同比增长6.5%
- (2023-08-15)商务部部长王文涛:欢迎阿联酋企业持续扩大对华投资
- (2023-08-15)新华社纪录片|生态贵州
- (2023-08-15)决战平安京网易版怎么改名字 决战平安京网易版改名字方法介绍
- (2023-08-15)驰援许家印的纽顿集团:天津起家,三年零营收,号称百亿投资金华超级工厂
- (2023-08-15)驰援许家印的纽顿集团:天津起家 三年零营收
- (2023-08-15)长江惊现“半江瑟瑟半江红”的壮丽景观
- (2023-08-15)mac怎么卸载程序安装包
- (2023-08-15)博弈三个模型与对号入座操作法
- (2023-08-15)“多巴胺”消费催热“色彩经济”
- (2023-08-15)若新赛季哈登拒绝上场 每场将被罚款38.9万美元
- (2023-08-15)同程旅行中秋国庆出境游机票咨询量增长超4倍
- (2023-08-15)联合国前副秘书长兼环境规划署执行主任埃里克·索尔海姆:ESG是绿色发展的机遇
- (2023-08-15)哈登莫雷,说翻就翻
- (2023-08-15)蜜雪冰城要出动画片了!“雪王”IP和周边为何火爆茶饮界
- (2023-08-15)越野英雄正式回归!郑州日产新帕拉丁上市,售价16.98万起
- (2023-08-15)最佳接种时机有变!杭州流感疫苗开打,预约方式看这里
- (2023-08-15)压缩到26个专业,增设“申论”,新的文职考试大纲干货来了!
- (2023-08-15)劳动成就幸福梦!上师大附属二实验学校开展争做暑期“劳动小达人”活动
- (2023-08-15)课程报名丨如何用营销思维开启创业之路?
- (2023-08-15)“三乡人”汇聚,浙江这里的桃子格外“甜”
- (2023-08-15)浙南地区最大天然气保供工程——浙能温州LNG接收站进入试运行阶段
- (2023-08-15)家庭常见的微波炉 你真的会正确使用吗?
- (2023-08-15)长青股份:2023年半年度净利润约1.73亿元 同比下降14.48%