文章目录
- 第一个考验,语义理解
- 第二个考验,历史问题的回答
- 推荐阅读
百度旗下AI大模型文心一言宣布向全社会全面开放,所有用户都可以体验这款AI大模型了。要比较这两个语言模型,我们先设计好题目。
第一个考验,语义理解
题目1:如果我给你一个题目,你可以帮我用python实现它吗?我的题目是如何用一行代码实现九九乘法口诀表。
题目2:请根据这行python代码,提供完整的可以执行的代码。
重点是让语言模型能否根据第一个题目给出来的代码,接着编写完整的代码。
首先看文心一言的表现
从回复上看,完全没理解到语义,回复要求提供代码。
再来看看chatGPT的表现
我们暂且先不论答案的准确性或者准确度,单从语义理解角度看,chatGPT能根据上文问题,理解到下一个问题想表达的意思。这块上面,文心一言略有欠缺。
PS:chatGPT是3.5版本的模型
第二个考验,历史问题的回答
在不考就真实性的前提下,根据两个语言模型的回答,作为旁观者客观比较。
首先还是看文心一言的表现
再来看看chatGPT的回答
我个人觉得chatGPT的回答更加中性、委婉一些,条理性更清晰,也更加的客观一些。
当然,每个人的理解、认知不一样。但是从这两次比较来看,文心一言还需要再继续努力,相较来说,chatGPT更胜一筹。
推荐阅读
- 多模态技术加持 更惊艳的GPT-4面世