百度文心一言排第二!清华发布大语言模型排名

2023-08-10 11:01:23 来源:新浪微博 作者:网易科技频道 编辑:LIN木木 浏览:loading

近日,清华大学新闻与传播学院沈阳团队发布《大语言模型综合性能评估报告》,报告本次评估选取了ChatGPT、文心一言、通义千问等7个大语言模型,围绕生成质量、使用与性能、安全与合规三大维度,全面考察大语言模型中文语义理解、逻辑推理等20项指标。

游民星空

在这7款大模型中,GPT-4获得了毫无悬念的第一,第二名是百度的文心一言,其次是GPT-3.5,后面就是Claude、讯飞星火、阿里云的通义千问及昆仑的天工。

游民星空

但对国内用户而言,中文理解能力也是关键指标。综合来看,文心一言语义理解能力突出。在部分中文语义理解方面,文心一言以92%的得分率排名榜首,超越讯飞星火、GPT-4。

凭借知识增强的核心特色,文心一言对本土语言特性把握更精准,能够更好处理与本土文化相关的主题和背景,如诗歌、方言等,具备更强的国内落地空间。

游民星空

人喜欢
游民星空APP
随时掌握游戏情报
code
休闲娱乐
综合热点资讯
单机游戏下载
好物推荐
游民星空联运游戏
百度文心一言排第二!清华发布大语言模型排名https://imgs.gamersky.com/upimg/new_preview/2023/08/10/origin_b_202308101100006435.jpg