本期文章由数字罗塞塔计划出品,于2023年3月9日在“浙江档案杂志”公众号首先发布,原名《兰台讲堂丨再“进化”的ChatGPT,能胜任文章撰写工作吗?》(兰台讲堂中仅选取作者和ChatGPT的部分聊天记录,本文将完整版内容整理如下)。
上期回顾
【ChatGPT视角】聊聊档案资源开发利用
(点击进入文章)
在上一期与ChatGPT的对话中,我们聊了聊档案信息资源的开发利用,也对ChatGPT的性能进行了测试与评价,对其功能有了大致的了解。ChatGPT掀起全球AI热潮,在占据长达几个月的网络头条后,仍风头不减,如今不负众望的“进化”,推出plus版,迈向4.0架构,甚至更加“人性化”......一系列的进步再次引发了世界范围内对“AI会如何重塑各行各业”的探讨。人们猜测、但ChatGPT是否将替代记者、行业研究员、咨询、编辑、程序员等职业,实际上是担忧以此谋生的人会逐渐失去市场价值,笔者也不禁思考:ChatGPT出现后,究竟会对写作的哪些环节造成影响呢?它写得出原创文章吗?编辑行业受到的影响会有多大?......
带着这些疑问,笔者再次点开了对话框。
ROUND 1
开门见山
回答的很得体,但是有些“啰嗦”,试试看能否限制回答字数。
能对“口语化”的要求迅速作出理解和响应。
ChatGPT的主要优点之一就是它能够理解和响应自然语言,对用户的输入产生更适当和正确的反应。在以上问答中,ChatGPT一直“聪明”巧妙地围绕着档案主线展开对话,例如ChatGPT认为笔者提到的原创文章属于档案领域,明显是对上下文进行了关联之后才给出的回复。
ROUND 2
写作实操
ChatGPT被训练成可以产生高质量文本、文章的AI语言模型,经过多次迭代优化后,虽然能够生成尽可能准确和流畅的文章,但是其表现还是取决于输入的信息和任务类型。笔者让ChatGPT以“电子档案元数据和数据元概念辨析”为题写一篇文章时,ChatGPT无法正确理解我的问题(也许由于中英文翻译限制),在更换了三四种浅显易懂的问法之后,才开始有针对性的回答。
虽然ChatGPT看起来一本正经的科普了电子档案元数据和数据元的概念,但笔者细读之后便发现其内容真假混杂,如果你不知道正确的答案很可能会被它“以假乱真”,建议用户在阅读ChatGPT的答案时,务必对内容的真实性进行检查评估。此外,ChatGPT也受到一些限制,比如只是基于输入的内容进行分析和回答问题,不能像人类一样有自己的思想和情感,因而现阶段尚无法胜任高质量原创文章的写作任务。
对于电子档案元数据和数据元概念的解读,可参考本公众号文章:《电子档案元数据和数据元概念辨析》。
ROUND 3
准备挖坑
以上回答的期刊名称是对的,而对于期刊的介绍则不完全正确。ChatGPT也很“圆滑”严谨地表示:“我可以给出一些中国具有影响力的档案期刊的建议,但是由于涉及到具体的学科领域和研究方向,所以我可能无法给出最准确和全面的答案。”
......
重复询问五次,每次回答都不同。
(※第二次回答是笔者重复5次同样提问之后,ChatGPT彻底认输了!)
经过以上的问答,不难发现:ChatGPT在上下文语义理解上表现出了很强的优势,但在逻辑性和原创性上还存在明显的欠缺。它能回答的问题基本都是网上可以搜到答案的问题,再进行筛选组合,形成相对通顺的答复;而面对一些需要进行复杂逻辑思考,甚至通过数据分析才能得出的结论,ChatGPT便会随机推荐,更有可能“不知所云”、“胡编乱造”,逼急了也会诚恳地表示它不具备获取最新数据或排名的能力。对于ChatGPT来说,处理关联性内容要比“思考”因果关系或归纳推理更为游刃有余。
“与ChatGPT对话”系列圆满结束!
ChatGPT寄语
档案行业公众号的出现为广大读者提供了更为便捷的获取档案信息和文化的途径,同时也推动了档案数字化和信息化的发展。在未来的发展中,我们相信档案行业公众号将继续为读者提供更加优质、丰富和实用的内容,并成为推广档案文化和传承人类文明的重要力量。