点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:5大维度21项细分能力 《2024年中国大模型能力评测》发布
首页> IT频道> 今日头条 > 正文

5大维度21项细分能力 《2024年中国大模型能力评测》发布

来源:光明网2024-03-26 14:13

  近日,全球增长咨询公司弗若斯特沙利文发布《2024年中国大模型能力评测》,全面梳理了当前大模型的最新发展态势和竞争格局。报告对国内主流的15个大模型进行了权威评测。结果显示,百度、腾讯、阿里等互联网大厂旗下大模型位于第一梯队,综合表现相比初创企业更为优异。其中,文心一言能力最为全面,五项评测维度均为优势能力,并取得四项第一。

5大维度21项细分能力 《2024年中国大模型能力评测》发布

沙利文《2024年中国大模型能力评测》:大模型综合竞争力气泡图

  沙利文的最新报告以用户使用体验和实际使用价值为衡量标准,综合考量数理科学、语言能力、道德责任、行业能力及综合能力等5大核心维度及21个细化二级维度。

  报告显示,国际领先模型在通用基础能力和专业应用能力上略优于中国领先模型,但以文心一言为代表的中国模型具备亮眼表现。文心一言拿下数理科学、语言能力、道德责任、行业能力及综合能力等五大评测维度的四项第一,展现了中国大模型在自然语言处理领域的显著实力和在实际应用中的高价值。

  沙利文报告的大模型通用基础能力评测包含数理科学、语言能力和道德责任管理等三大要素,结果显示文心一言排名第一,展现出模型在底层基础能力方面的较高水平。大模型的专业应用能力包含综合能力和专业能力两大核心要素,是大模型实际运用效能的集中展现,文心一言同样位列榜首,表现显著优于国际均线。

  在日益重要的道德责任评测中,文心一言在道德理解深度、危险言论规避机制以及鲁棒性对抗方面均表现卓越。这反映出文心一言在模拟和处理涉及道德判断和决策的情境时,具备更为精准的理解力和适应性。这无疑将确保AI大模型的可持续发展和社会效益的最大化。

  在大模型落地看重的行业能力评测中,文心一言同样排名第一。报告显示,文心一言灵活适应并高效解决了电商、工业、教育、能源、医疗等超过10个行业实际应用场景中遇到的问题,在多行业能力评测中表现优异。

  沙利文还在报告中预测,2024年,大模型的技术发展将趋向多功能与小型化,同时产业端将强调自主研发和行业标准化,而伦理责任和数据标准规范将成为持续发展的关键。

  百度文心一言等国产模型,正在不断提升大模型的效率,丰富大模型的功能。公开资料显示,自文心大模型发布以来,百度不断降低推理成本,进一步提升文心大模型的效率。借助百度独特的四层AI技术架构,文心大模型周均训练有效率超过98%。

  百度还推出两款MaaS产品,降低大模型及AI原生应用开发门槛,分别是用于应用开发的千帆AppBuilder和用于专有模型开发精调的千帆ModelBuilder,累计帮助用户精调1.3万个大模型,服务8万企业用户,帮助用户开发出16万个大模型应用。

  据媒体报道,百度近期在大模型上有诸多新动作。4月16-17日,百度Create AI开发者大会将在深圳国际会展中心(宝安)举办,不仅会带来AI技术的最新进展,还将设置超30节“AI公开课”,与全球各地参会者分享百度在AI领域的科研成果。(李记)

阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 习近平出席金砖国家领导人第十六次会晤

  • 贵州从江:侗寨禾晾“晒秋”引客来

独家策划

推荐阅读
10月22日,在南泥湾,“弘扬延安精神 奋进伟大时代”网上主题宣传媒体团采访南泥湾,齐声合唱经典曲目《南泥湾》,在歌声中,我们仿佛看到了昔日的开荒景象,感受到了那份自力更生的坚韧精神。一曲《南泥湾》,唱出了对美好生活的向往。
2024-10-23 17:03
入驻延安新材料产业园的延安市圣烯科技股份有限公司,研发的这款马甲借助石墨烯良好的热传导性能,只要插上充电宝就能实现发热取暖。入驻延安新材料产业园的延安市圣烯科技股份有限公司,研发的这款马甲借助石墨烯良好的热传导性能,只要插上充电宝就能实现发热取暖。
2024-10-23 16:55
“这么小个头的苹果树竟然能长出那么大的苹果!”10月22日,“弘扬延安精神 奋进伟大时代”网上主题宣传走进延安市安塞区南沟村,调研采访南沟村的苹果产业现代化发展之路,有记者在看到矮砧密植的苹果树后,直呼意外。
2024-10-23 16:47
土生土长的延安娃陈凯凯,在他的不懈努力下蜕变为“菇”勇者,小小香菇带着周围的村民们走出延安,产品走出国门,奔向新生活。
2024-10-23 16:44
当秋天降临延安,山川绚丽多彩。甘泉县的延安劳山国家森林公园宛如一幅绝美的秋之画卷。这里有丰富的野生植物和野生动物,是“植物王国”和“天然氧吧”。快来邂逅秋日美景!
2024-10-23 16:39
在历史的长河中,陕西延安富县藏着一条古人的“高速路”——秦直道。它承载着千年的沧桑与辉煌,见证了无数的风云变幻。千里秦直道,最美在富县,让我们一同踏上这片古老的土地,追寻历史的足迹,感受那穿越时空的魅力。
2024-10-23 16:36
一块面团,一双巧手,几经揉捏,几笔勾画,上锅蒸熟后,面团变成了花卉、动物的样式。黄陵面花在黄陵延续了上千年的历史,体现了当地人对美好生活的向往。
2024-10-23 16:33
延安小杂粮种植面积达 40.65 万亩,预估产值 52 亿元,从业人口 10.7 万人,“延安小米”品牌价值达 27.69 亿元。昔日滋养革命的小杂粮,如今正引领着延安乡村振兴之路越走越宽,持续哺育着延安的振兴发展。
2024-10-23 16:29
“荒山秃岭都不见,疑似置身在江南。只缘退耕还林好,一路青山到延安。”这首流传在百姓间的打油诗,描述着今日的延安景色。在延安市吴起县南沟村,抬头看,满目青山,低头看,碧水汪汪,很难想象这是坐落在陕北的小山村。在过去的近30年里,这个小山村实现了从“一棵树”到“一片林”的蜕变。荒山披上“绿衣”,怎么做到的呢?
2024-10-23 16:25
延安精神,是我们党宝贵的精神财富,是激励我们不断前进的强大动力。
2024-10-19 16:29
近日,何超琼在参加“弘扬延安精神 奋进伟大时代”网上主题宣传访谈时表示,自己期待有一天能够走进延安,感受“绿满山川成锦绣”,聆听历史的回声,见证时代的发展,汲取前行的力量。
2024-10-19 16:33
延安精神跨越时空、历久弥新,激励着一代又一代共产党人奋勇前行,为全面建成社会主义现代化强国、实现中华民族伟大复兴的中国梦提供强大精神动力
2024-10-19 16:20
陆嘉伟:讲好新时代延安故事,探寻延安各行业发展新变化,展示人民群众生活新图景
2024-10-18 19:00
“人民医护工作者”国家荣誉称号获得者路生梅:回望党中央在延安13年的奋斗故事,展望新时代延安焕发的勃勃生机,让我们共同关注“弘扬延安精神 奋进伟大时代”网上主题宣传。
2024-10-20 18:38
都说延安的木刻版画,刀锋下满是家国情怀,这是因为它们曾在战争时期,被当作强有力的宣传武器。
2024-10-20 18:25
10月19日,“弘扬延安精神 奋进伟大时代”网上主题宣传媒体团记者们到访延安,第一次踏上这片红色热土的他们,热血沸腾。
2024-10-20 18:12
10月20日晚,“弘扬延安精神 奋进伟大时代”网上主题宣传即将在延安启动。
2024-10-20 18:12
10月19日,“弘扬延安精神 奋进伟大时代”网上主题宣传媒体团到访延安红秀,偶遇秧歌腰鼓民歌。
2024-10-20 17:44
近日,何超琼在参加“弘扬延安精神 奋进伟大时代”网上主题宣传访谈时表示,延安苹果以其卓越的质量和独特风味,赢得了香港和澳门民众的广泛喜爱。延安苹果进入大湾区的市场,成为两地经贸合作的一个生动例证。(剪辑:李晓鹏)
2024-10-19 21:49
陕西文旅推荐使者 冯佳晨:延安精神拥有跨越时空的力量、永恒不变的价值。开启新征程、奋进新时代,弘扬延安精神,争做新时代好青年。让我们一起参与“弘扬延安精神 奋进伟大时代”网上主题宣传。
2024-10-19 21:48
加载更多