自从chatgpt发布以来,国内大模型发展非常迅速。我对这项目技术也保持了非常多的持续关注,我一直认识,chatGPT以及其他GPT会给社会带来更大的变革。经过专业训练的大模型可以替代部分客服,部分程序员,部分美工,翻译之类的工作,这会对社会造成一定的冲击。
国外的大模型主要是以研究chatgpt为主,国内使用过阿里,科大迅飞,虎博,昆仑万维等GPT,整体来说,国内进步很快,这么快就能拿出来像样的可以和chatgpt一较长短的产品,还是很振奋人心的。但也发现不少不足的地方,希望后期能超越chatgpt。
我个人比较爱好文学和编程,其他方面不擅长,不好评估优劣,所以以也是从文学和编程方面对国内外做对比。
首先考查了一些生僻的文化常识,不过感觉回答都不行,后面来想想降低要求设计了四大名著的一些问题和当代一些流行的作家的知识,也考察一些外国作家和作品。我问了最简单的问题,金陵十二钗都有谁,除了昆仑万维回答正确,其他全是胡说八道,有什么刘姥姥,张小花,王翠花,让人大跌眼镜。又问了西游记中孙悟空取经路上亲手打死了哪些妖怪,感觉都是乱答一气,只有白骨精回答正确,又问了三国演义关羽战场上杀过哪些人,也没回答对的,可见都不擅长这类总结类的文学问题。
然后我问作家的问题,首先是莫言,贾平凹,王朔,海明威,马克吐温,欧亨利,金庸,古龙的文风和主要作品,国内有些文风回答全是魔幻现实主义,感觉不行,作品也不对,连莫言的作品很多也列不的不对,张冠李戴。这些常识其他也不重要,最主要的是要能帮人工作,我就又测试了他们写小说的能力。
然后我让他们仿照海明威风格写小说,感觉只有chatgpt能按风格写小说,其他的写作风格比较乱,看不出谁的风格。
比如让他们模仿古龙风格写一个小龙女离婚的故事,chatgpt写的感觉有一丝古龙小说的味道。
让他们模仿海明威写一个毕业的小孩子中彩票的故事:
感觉国内的还不能使用不同作家风格来创作,这在写作上和chatgpt是有一丝差距的,国内的写个高中作文完全没有压力,国外的也没压力, 不过可以使用自己喜欢的作家风格写作文,我觉得还是值得国内学学的。
后来我让他们帮忙设计网站。列出了一串条件,只能chatgpt和昆仑万维的天工写出来了,其他的好像只能完成部分函数,需要手工拆分成函数需求。昆仑万维应该是对编程做了优化。我的题目如下:
1.用html5和css做前端,python做后端,写一个聊天机器人网站,机器人使用chatgptgpt
2.为网站添加角色和主题设置,角色包括程序员,教师,健身教练,营养专家等
3聊天的内容可以保存入Mysql数据库并在聊天界面左边显示列表,点击可以查看详细聊天信息。
4.为网站添加会员管理功能,会员信息存入mysql,并和聊天信息相关联
5,为网站添加聊天记录管理功能,可以查看和导出txt
6.为该网站的所有功能添加一套开放的api供我的app和第三方应用使用
大家可以试试设计网站,感觉chatgpt确实很惊艳,通义,星火,天工也确实很棒。能独立开发设计项目,chatgpt和天工应该算中级往上的程序员了,由于生成的代码里错误处理比较少,我觉得在复杂的生产环境中,可能会不好排查错误,所以不能算高级的。其他的能按照要求完成相应模块,也是初中级了,再努力一把就进入新境界了。