点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:5大维度21项细分能力 《2024年中国大模型能力评测》发布
首页> IT频道> 今日头条 > 正文

5大维度21项细分能力 《2024年中国大模型能力评测》发布

来源:光明网2024-03-26 14:13

  近日,全球增长咨询公司弗若斯特沙利文发布《2024年中国大模型能力评测》,全面梳理了当前大模型的最新发展态势和竞争格局。报告对国内主流的15个大模型进行了权威评测。结果显示,百度、腾讯、阿里等互联网大厂旗下大模型位于第一梯队,综合表现相比初创企业更为优异。其中,文心一言能力最为全面,五项评测维度均为优势能力,并取得四项第一。

5大维度21项细分能力 《2024年中国大模型能力评测》发布

沙利文《2024年中国大模型能力评测》:大模型综合竞争力气泡图

  沙利文的最新报告以用户使用体验和实际使用价值为衡量标准,综合考量数理科学、语言能力、道德责任、行业能力及综合能力等5大核心维度及21个细化二级维度。

  报告显示,国际领先模型在通用基础能力和专业应用能力上略优于中国领先模型,但以文心一言为代表的中国模型具备亮眼表现。文心一言拿下数理科学、语言能力、道德责任、行业能力及综合能力等五大评测维度的四项第一,展现了中国大模型在自然语言处理领域的显著实力和在实际应用中的高价值。

  沙利文报告的大模型通用基础能力评测包含数理科学、语言能力和道德责任管理等三大要素,结果显示文心一言排名第一,展现出模型在底层基础能力方面的较高水平。大模型的专业应用能力包含综合能力和专业能力两大核心要素,是大模型实际运用效能的集中展现,文心一言同样位列榜首,表现显著优于国际均线。

  在日益重要的道德责任评测中,文心一言在道德理解深度、危险言论规避机制以及鲁棒性对抗方面均表现卓越。这反映出文心一言在模拟和处理涉及道德判断和决策的情境时,具备更为精准的理解力和适应性。这无疑将确保AI大模型的可持续发展和社会效益的最大化。

  在大模型落地看重的行业能力评测中,文心一言同样排名第一。报告显示,文心一言灵活适应并高效解决了电商、工业、教育、能源、医疗等超过10个行业实际应用场景中遇到的问题,在多行业能力评测中表现优异。

  沙利文还在报告中预测,2024年,大模型的技术发展将趋向多功能与小型化,同时产业端将强调自主研发和行业标准化,而伦理责任和数据标准规范将成为持续发展的关键。

  百度文心一言等国产模型,正在不断提升大模型的效率,丰富大模型的功能。公开资料显示,自文心大模型发布以来,百度不断降低推理成本,进一步提升文心大模型的效率。借助百度独特的四层AI技术架构,文心大模型周均训练有效率超过98%。

  百度还推出两款MaaS产品,降低大模型及AI原生应用开发门槛,分别是用于应用开发的千帆AppBuilder和用于专有模型开发精调的千帆ModelBuilder,累计帮助用户精调1.3万个大模型,服务8万企业用户,帮助用户开发出16万个大模型应用。

  据媒体报道,百度近期在大模型上有诸多新动作。4月16-17日,百度Create AI开发者大会将在深圳国际会展中心(宝安)举办,不仅会带来AI技术的最新进展,还将设置超30节“AI公开课”,与全球各地参会者分享百度在AI领域的科研成果。(李记)

阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 公益课堂点亮多彩假期

  • 湖北枝江百里洲长江大桥施工顺利

独家策划

推荐阅读
奔跑吧·少年2024年内蒙古自治区棒垒球邀请赛在鄂尔多斯市康巴什区开赛。
2024-04-20 17:03
4月2日,随着57652次检测车从南充北站5道缓缓驶出,标志着新建汉中至巴中至南充铁路南充至巴中段(以下称"巴南高铁")启动联调联试,进入工程验收关键阶段,为全线早日开通奠定了坚实基础
2024-04-03 15:11
为切实织密森林“防火网”各地组织人员巡查防火。
2024-04-03 15:11
2024年3月31日,“知音湖北 遇见浪漫孝感”春赏花活动在湖北省孝感市金卉庄园景区启动。金卉庄园花团锦簇,五彩斑斓花卉竞相绽放。人们穿梭在花海之间,享受明媚春光。
2024-04-02 15:40
2024年3月23日,由中国服装设计师协会主办的2024秋冬中国国际时装周在北京开幕。
2024-03-26 21:07
3月17日,原创独立设计师品牌SHANG1 BY SHANGYI 2024秋冬系列时装发布会在北京举行。
2024-03-18 16:39
2024年2月28日,新疆维吾尔自治区巴音郭楞蒙古自治州博湖县境内的博斯腾湖出现推冰景观。
2024-02-29 18:59
云南省曲靖市罗平县马街镇钻天坡,盛开的油菜花梯田在初升太阳映照下,勾勒出一幅田园春景图
2024-02-23 10:59
美丽的三亚湾
2024-01-20 17:42
2024年1月12日,江西省吉安市吉州区庐陵文化生态园层林尽染,色彩斑斓,市民徜徉其间,尽享生态之乐。
2024-01-13 19:43
2023年12月26日,在云南省红河哈尼族彝族自治州元阳县新街镇黄草岭村附近,游客在冬樱花与梯田边游览。
2023-12-26 15:39
2023年12月12日,新疆哈密市巴里坤县第十九届冰雪文化旅游节采冰仪式在高家湖二渠水库进行。仪式主要展示了"头冰"的开采上岸过程。开幕式上还举行迎风旗、祈福词、喝出征酒等仪式。
2023-12-13 16:08
2023年12月13日,河北省正定古城迎来降雪,古城内外银装素裹,犹如一幅淡雅的水墨画,美如画卷。
2023-12-13 15:59
2023年11月28日,贵州省六盘水市明湖国家湿地公园层林尽染,景色迷人。
2023-11-29 15:42
2023年11月28日,江西吉安长塘镇中心小学,老师指导学生剪纸。
2023-11-29 15:42
三角梅原产于巴西,现主要分布在中国、秘鲁、阿根廷、日本、赞比亚等国家和地区。其中,以海南三角梅最为出名。
2023-11-29 11:13
2023年11月23日清晨,朝霞初现,三峡库区湖北省宜昌市秭归县沿江公路G348国道的绝壁岩体上,工人们正在铺设防护网,以防止岩崩和落石。
2023-11-24 15:15
2023年11月23日,黑龙江哈尔滨,哈尔滨站工作人员正在清理站台积雪。
2023-11-23 16:02
2023年11月21日,甘肃敦煌,首趟"敦煌号"铁海联运国际货运班列装载1000吨石棉驶出,经天津港通过铁海联运发往泰国曼谷。
2023-11-21 16:55
2023年11月21日,江苏省如皋市龙游河生态公园,色彩斑斓的树木与一河碧水相应成趣。
2023-11-21 16:55
加载更多