巨人网
产经 科技 企业 数据 峰会 快讯

国产大模型超顶!文心一言中文理解、数学拿下全球第一

2024-04-24来源:互联网编辑:汪淼

由清华大学基础模型研究中心联合中关村实验室研制的SuperBench大模型综合能力评测框架,正式对外发布2024年3月版《SuperBench大模型综合能力评测报告》。评测共包含了14个海内外具有代表性的模型,结果显示:文心一言4.0中文理解、数学等多能力全球第一。

图片

评测显示,文心一言4.0表现优异,在中文推理、中文语言等评测上遥遥领先,和其他模型拉开明显差距。中文理解上,文心一言4.0领先优势明显,领先第二名GLM-4 0.41分,GPT-4系列模型表现较差,排在中下游,并且和第一名文心一言4.0分差超过1分。

在语义理解中的数学能力上,文心一言4.0与Claude-3并列全球第一; GPT-4系列模型位列第四五,其他模型得分在55分附近较为集中,明显落后第一梯队;而在语义理解中的阅读理解能力上,文心一言4.0超过GPT-4 Turbo、Claude-3以及GLM-4拿下榜首。

在企业选择大模型最看重的安全性评测上,国内模型文心一言4.0表现亮眼,力压国际一流模型GPT-4系列模型和Claude-3拿下最高分(89.1分),Claude-3仅列第四。

项目顺利推进 业绩进一步向好 博迈科2024稳健开局
面对全球局势的不稳和国际市场的动荡,博迈科积极进取,内抓管理外拓市场,将诸多“不确定”成功转化为“确定”。2024年4月25日晚间,博迈科发布一季度报告,公司去年签订的项目正顺利推进中,实现了2024年稳健开局

2024-04-25

共越山海 见不凡,TCL实业携全球合作伙伴共建产业和谐生态
4月19日,2024 TCL实业全球合作伙伴大会(GPC 2024)在武汉圆满落幕。作为TCL实业规模最大、面向全球全品类智能终端客户的顶级峰会,此次大会共吸引了来自全球六大洲47个国家和地区近500名全球合作伙伴参会。大会不仅

2024-04-20

可立享无线视频会议一体机上市成功!
近年来全球兴起混合办公模式潮流,远程协作与视频会议成为趋势,AI技术进一步优化会议体验。作为无线协作技术的领导者,巴可积极打造引领市场趋势的产品与方案,于4月17日在北京infoComm China展会上,隆重举行可立

2024-04-19