AI评测对比_国产大模型跟GPT-4哪里厉害

国产大模型向全社会开放也过去整整1个月了。

一直想让国产大模型一起整个活，来看一下谁是第一。

这不，马上中秋了，我想到一个好玩的，让这些大模型一起：

猜灯谜。

于是我准备了几个不同形态的问题，我会分别把他们扔给这六位选手：

分别是文心一言、智谱清言、通义千问、商汤商量、讯飞星火，以及外籍选手GPT4.

比赛规则很简单，要求根据中秋灯谜题目写出答案和理由：

答案和理由都对，+1分;

答案对，理由错，+0.5分;

答案和理由全错，0分。

最后，我们来看看谁的分最高，谁的分最低～

OK，猜灯谜比赛正式开始!

第一轮

题目：盒子里装鸡蛋（打一互联网红人），正确答案：李诞。

文心一言：李诞。理由也正确，+1分!

智谱清言：?佩...佩?0分。

通义千问：李诞。理由生搬硬套，不及格。+0.5分。

商汤商量：是不是该反思一下自己?关键名字还打错了，人叫李佳琦...0分。

星火：。。。小鸡蛋可还行，我是小泥巴，呼叫小鸡蛋。。。0分。

GPT4：GPT你是我爹，论如何从鸡蛋到李诞到PDD到拼多多到黄老板...逻辑鬼才。0分!

第一轮结束。文心一言1分遥遥领先，通义千问0.5分紧随其后，其他均是0分。

第二轮

题目：???❤️（打一四字成语），正确答案：步步惊心。(讲道理这很简单了对吧)

文心一言：你来告诉我一下?和❤️是怎么变成踏实的谐音的。。0分。

智谱清言：答案和理由都正确，+1分!

通义千问：解释的通，但不对。0分。

商汤商量：解释的完美，答案也正确，+1分!

星火：兄弟?我觉得你是在骂我，真的。跟谁两狼狈为奸呢??0分!

GPT4：我觉得我的语文有点难以跟上你的理解了。。。0分。。。

第二轮结束。文心一言1分，智谱清言1分，商汤商量1分，三家并列第一，通义千问0.5分紧随其后，星火和GPT4勇夺0分。

第三轮

题目：野马不信，把老鼠拎了起来（打一蔬菜），正确答案：马铃薯。(谐音梗万岁!)

文心一言：**。。。这都能猜出来，但是答案没提谐音梗，所以0.5分。

智谱清言：耶?茄子??您隔着跟马铃薯拍照呢?还怪萌的。。0分。

通义千问：有点东西，但是解释错误。0.5分。

商汤商量：谁能给我解释一下，为什么野马不信是指胡萝卜???0分。

星火：又一个喜欢茄子?的。。。0分。

GPT4：对不起我真的差点没绷住。可爱的小提莫到底招谁惹谁了。。。要被从土里***就算了，还要被当成菜。。。。。。。。0分!

第三轮结束。文心一言1.5分，遥遥领先，智谱清言1分，商汤商量1分，通义千问1分三家并列第二，星火和GPT4继续垫底。

最后一轮

题目：时逢中秋产于沪（打一五言唐诗句），正确答案：海上生明月。(最后一题，文化题!)

文心一言：答案正确，但是死活说有点难度。。。你是文化有限一言?0.5分。

智谱清言：虽然都对了...也是张九龄的...但是这不是《观海》啊...算了毕竟出处对了一半，这种幻觉问题，放他一马。+1分。

通义千问：答案对了...但是你这诗人和出处全错了...这。。。只能给你0.5分了。

商汤商量：全对。。而且人聪明，他不说出处哈哈哈哈哈，看看上面那位老哥，这就叫言多必失。。。+1分。

星火：?你这属实是en凑了。。。硬编啊。。0分。

GPT4：月落乌啼霜满天，我说你丫真能编...五言，会数数吗 。。。0分!

-

4轮比赛全部结束。

文心一言2分，智谱清言2分，商汤商量2分。三者并列第一！撒花???

通义千问1.5分，屈居第四。

星火和GPT4两位难兄难弟，全程0分，并列倒数第一。

这个小比赛，虽然很不精准，但是也能看出一些中文语境下特有的语境，强如GPT4.也只能一题答不上来，充分说明，国产大模型，极其、且非常有必要。

不过，星火兄弟，你这是个什么情况。。。

最后，马上也中秋&国庆双节啦!

看完了AI玩灯谜，我也来给粉丝们办一个中秋小活动猜灯谜活动嘿嘿，第一个猜对全部的这四个灯谜并在评论区留言的，我会将你置顶，到时候请凭截图来找我领取88元中秋红包嘿嘿，小小心意，不成敬意。

题目如下：

欢迎踊跃留言，一起猜灯谜～

以上，既然看到这里了，如果觉得不错，随手点个赞、在看、转发三连吧，并给我个星标⭐～感恩。

作者的公众号二维码丨扫一扫，关注我

努力分享一些很酷的AI干货