-
文心一言只是“ChatPPT”?我们和它深度聊了聊
最后更新: 2023-03-20 18:46:10第三个场景是数理逻辑推算。
先用小品中的“经典案例”考验一下文心一言。
从测试结果来看,文心一言在简单的数学计算理解上没有问题,但在沟通的连续性上似乎表现的并不好,这在一定程度上影响了对话体验。
再换一个小学生日常会遇到的试题,文心一言很快给出了正确答案。但当被问到解题思路时,文心一言则理解错了题意,并给出了错误的答案。
再换一个类似数学题,文心一言好像又理解错了题意,直接给出了错误的答案(正确答案:鸡有12只,兔有19只)。
可见,在数理逻辑推算方面,文心一言还有很大进步空间。在目前水平下,如果问题表达的不够清晰,文心一言很容易给出错误答案。
第四个场景是中文理解。
其实在前面的场景中,已经在一定程度上体现了文心一言的中文理解能力,这里再用两个例子考验一下它。
在以上几个问题中,文心一言体现了自己的中文语言理解能力。但在另外一些问题上,它则切入了“一本正经胡说八道”的模式。
第五个功能是多模态生成,即输入和输出的内容不限于文字,可以根据文字生成图片、语音或视频,这个功能也是ChatGPT不具有的。
在“文生图”方面,文心一言在简单要求下表现的中规中矩,基本上理解了指令要求。
但在用诗词生成图片方面还有待进步。
文心一言的视频生成能力则因成本较高,现阶段还未对所有用户开放,但它会给出拍摄相关视频的方法,这一点值得肯定。
对比火热的ChatGPT,表现如何?
人们之所以关注文心一言,最主要的原因就是ChatGPT的爆火。作为首个“中国版ChatGPT”,文心一言在与真正的ChatGPT同台竞技时,表现又会如何呢?
由于账号限制等客观原因,观察者网选择了ChatGPT免费版(基于GPT-3.5,没有参与3月14日的GPT-4更新),以及文心一言测试版(版本号为V1.0.0,发版日期为3月14日)。试验中,每款程序的回答结果均选取初次生成的内容,不作反复刷新。
第一组问题,主题为“自我介绍”和“如何看待对方”,观察者网分别询问了两个模型。
不难看出,在本轮实测中,两个语言模型在介绍对方时都显得比较客观。
细微的差别是,ChatGPT更加高调,它不仅介绍了自己可以完成的任务类型,还强调自己“不断学习和进化”,“不仅支持中文,还支持多种语言”,“规模比文心一言大得多,训练数据也更加丰富”等,对于可能更适合文心一言的应用场景,它也进行了描述。
相比之下,“文心一言”则相对谦虚或低调,它表示,“每个模型都有自己的特点和优势,不能简单地评价‘谁更厉害’”。
但要指出的是,ChatGPT训练是基于一个固定的数据库,截止日期是2021年9月,也就是说ChatGPT无法掌握从那以后世界上发生的任何事的信息。
因此,它对文心一言的评价可以说是“一本正经胡说八道”,但这不能算是它的错。
- 责任编辑: 周毅  吕栋 
-
业务大幅收缩的斗鱼,终于减亏了
2023-03-20 18:13 观网财经-互联网 -
美国提名的世行行长候选人访日“拜票”
2023-03-20 13:41 -
海关总署回应集装箱空箱数量增加
2023-03-20 12:03 -
娃哈哈董事长回应《狂飙》中的AD钙奶镜头:没植入但我有意见
2023-03-20 11:11 -
瑞银收购瑞信!全球第五大财团只卖30亿
2023-03-20 10:31 观网财经-海外 -
3月LPR报价出炉:1年期与5年期以上均维持不变
2023-03-20 09:43 -
证监会现场检查:问题五花八门
2023-03-20 08:06 -
欠9.8亿未还,张兰家族信托被击穿
2023-03-19 21:40 -
中国银行:刘连舸辞去董事长等职务
2023-03-19 19:10 观网财经-金融 -
央行最新发声!提及硅谷银行
2023-03-19 17:43 观网财经-金融 -
全面注册制加速,首次全网测试完成
2023-03-19 17:08 观网财经-金融 -
自曝欠5700万,连亏9年的克莉丝汀人去楼空,所有门店停业
2023-03-19 16:26 观网财经-消费 -
杨元庆:改变中国制造业大而不强,要求我们加大真金白银研发投入
2023-03-18 22:10 观网财经-科创 -
公开双标?欧洲质疑美国救助硅谷银行必要性
2023-03-18 19:42 观网财经-金融 -
央行县(市)支行将走入历史,去年全国范围内已停招
2023-03-18 13:37 观网财经-金融 -
“现在我们电路板才稳定下来,因为有国产零部件了”
2023-03-18 11:59 观网财经-科创 -
知名游戏公司称“前女高管造假致5亿损失”,曾悬赏千万寻证据
2023-03-18 09:15 观网财经-互联网 -
全面注册制相关业务今日开启首次全网测试
2023-03-18 07:45 观网财经-金融 -
美三大指数集体收跌,第一共和银行重挫33%
2023-03-18 07:37 观网财经-海外 -
黑暗中的一束光?小鹏汽车押注技术突破:XNGP将明显超过友商
2023-03-17 22:29 观网财经-汽车
相关推荐 -
“西方媒体,看清你们了!”拜登“走后门”也没躲过 评论 54“TikTok只是烟雾弹,美情报机构才无时无刻不在…” 评论 142最后通牒?以色列放话“要么签,要么打” 评论 135“这把火怎么点着的?” 评论 427最新闻 Hot