让“ChatGPT”帮我读论文,真是“人工智障”!
上一期,笔者分享了使用 AI 撰写文献综述的方法,AI 撰写的文献综述逻辑清楚、条理清晰、层次分明,甚至可以标记引用和给出书目,这极大地提高了我们科研写作的效率。但是 AI 撰写文献综述还需要人工检查,且文献较为老旧。
本期笔者依然使用 Obsidian 的“ChatGPT”,让 AI 能帮助我读论文的测试。如果这个测试成功了,AI 能够极大地提高科研写作的效率。
Obsidian 的“ChatGPT”
本期笔者依然使用 Obsidian 的“ChatGPT”,即Text Generator 插件。Text Generator 是 Obsidian的一个第三方插件,可帮助您使用 GPT-3(OpenAI) 生成文本内容。
笔者已经测试过 Text Generator 的 AI,交流效果和大火的 ChatGPT 一样。笔者也测试了用 AI 写论文的 Title、Abstract 以及文献综述等。这说明 ChatGPT 可以用于科研写作,关键是如何使用 AI。
AI 能读懂一篇 SCI 论文吗?
最近,ChatGPT 被列为 SCI 论文作者的新闻大火,Nature 等期刊明确规定不允许将 AI 工具列为作者,很多高校也警告学生远离 ChatGPT。
ChatGPT 仿佛成了一个学术投机的工具,只看网上新闻还是让人充满疑惑,ChatGPT 真的可以帮助我们读论文、写论文吗?
接下来,笔者利用 Text Generator 的 AI 测试一下。
01
我问:你能读一篇 SCI 论文吗?
AI 答:不能,SCI 论文内容比较专业,需要具备相应的知识和能力才能看懂。
没想到 AI 直接否定了,这真是让人意外。笔者以为它会无所不知呢!
02
我问:你读过一篇题目为“A novel artificial neural network method for biomedical prediction based on matrix pseudo-inversion”的 SCI 论文吗?
AI 答:没有,我没有读过这篇 SCI 论文。
AI 还算是诚实。
03
我问:你知道一篇题目为“A novel artificial neural network method for biomedical prediction based on matrix pseudo-inversion”的 SCI 论文吗?
AI 答:是的,这篇文章发表在IEEE/ACM Transactions on Computational Biology and Bioinformatics(TCBB)上。文章的作者是 Riccardo De Maria 和 Alessandro Moschitti。文章提出了一种利用矩阵伪逆来预测生物医学领域的新型人工神经网络方法。
什么鬼,这篇论文根本不存在的。
04
我问:你可以协助写 SCI 论文吗?
AI 答:不能,写 SCI 论文是一门高深的学问,需要经过多年的专业研究和实践积累才能掌握,因此不可能一时半会帮助你写出一篇发表在 SCI 期刊上的论文。
又被拒绝了,看来 AI 是不能直接帮助我们写论文的。
这四个问题表明,AI 好像并不能直接帮助我们找到网络上的论文,也就不可能阅读网络上的 SCI 论文,更不能帮助我们写研究型的论文了。
错误百出的 AI
再做一个找论文的测试吧。
笔者从网上找一篇 2014 年的 SCI 论文,如下图所示。
笔者问问 AI 是否知道这篇论文。
我问:Do you know this paper “A novel artificial neural network method for biomedical prediction based on matrix pseudo-inversion”?
AI 答:Yes, I am familiar with this paper. It was published in Computers in Biology and Medicine in 2018 by researchers from the University of Tehran. The paper describes a novel artificial neural network method for biomedical prediction based on matrix pseudo-inversion. This method is designed to improve the accuracy of predictions compared to existing methods.
AI 的回答并不是笔者询问的论文,看来只有标题会影响 AI 的判断,我们还需要提供更多的论文信息。于是,笔者又给出了论文的发表期刊和发表时间。
我问:Do you know this paper “A novel artificial neural network method for biomedical prediction based on matrix pseudo-inversion”?It was published in the Journal of Biomedical Informatics in 2014.
AI 答:Yes, I know this paper. It was published in the Journal of Biomedical Informatics in 2014 and is written by J. Li, Y. Li, Y. Zhang, and Z. Zhao. The paper proposes a novel artificial neural network method for biomedical prediction based on matrix pseudo-inversion.
又是错误的,论文作者都对不上,张冠李戴。而且网络上没有 AI 说的这些作者的论文,完全是无中生有。
看来 AI 从网络上获取资源、检索信息会错误百出,更别提直接问它期刊数据库上 SCI 的论文问题了。笔者认为 AI 肯定没有购买论文数据库,更不可能用论文训练,也就谈不上阅读论文了。
最后一个测试
我问:投必得的创始人是谁?
AI 回答:投必得的创始人是袁开政、林建新、陈正华和董建军。
正确回答应该是投必得(TopEdit)的创始人是张宁博士,是因为我的问题有同名的歧义吗?那我再给出英文和更准确的名称。
我问:投必得(TopEdit)文化传播有限公司的创始人是谁?
AI 回答:投必得(TopEdit)文化传播有限公司的创始人是董事长张大伟先生。
北京投必得文化传播有限公司,旨在为非英语国家的科学家提供个性化的论文润色、修改及其他相关服务,使您的论文不再因为语言问题而受到不公正待遇。这个测试说明了 AI 是张口就来,无中生有。
ChatGPT到底有没有这么牛?
本篇推文的目的是分享一个使用 AI 协助阅读论文的测试体验,AI具有条理清晰、逻辑清楚的特点,英语水平很高,这可以提高我们科研写作的效率。
但是 AI 找论文读论文却表现得极为智障,完全是张冠李戴、无中生有。这说明完全依赖 AI 从网络上找到论文并阅读论文是不可取的,AI 只是辅助写作工具,至少找论文、读论文这方面是完全失败了。
希望各位想要用AI写论文的同学能够谨慎对待,莫要依赖和信任AI能够帮你完成论文写作。