站长之家（ChinaZ.com）4月16日 消息:中国人民大学和浙江大学的研究小组进行了一项有趣的研究，他们发现GPT-4预测学术论文撤稿的能力与人类审稿人有着惊人的相似之处，准确率高达95%。本研究不仅展示了大型语言模型在学术诚信维护中的潜在作用，也揭示了人工智能在学术研究中的应用关键在于如何被人类使用。

研究小组向GPT-4输入了数千篇SCI/SSCI期刊论文相关的1万多条推文，允许模型根据这些推文预测论文是否可能被撤回。这一过程与人类审稿人的预测结果进行了比较，表明GPT-4在预测撤回方面的准确性接近人类专家。

论文地址:https://arxiv.org/ftp/arxiv/papers/2403/2403.16851.pdf

研究还讨论了推文本身是否可以预测论文撤回的问题。通过分析一组包含3505篇撤回论文的数据集，并与未撤回的论文进行比较，研究人员发现，一些推文可以暗示在撤回论文之前存在问题。这些推文通常直接指出论文中的错误或学术不当行为，或通过批评和讽刺来质疑论文的质量。

在比较不同模型预测论文撤稿能力时，GPT-4.其预测结果与人工预测结果的一致性最好最高。此外，GPT-其他方法没有理由为其预测提供理由。然而，研究还指出，GPT-4有时会产生“幻觉”问题，可能会产生不恰当的输出，因此在使用时需要谨慎。

本研究的结果不仅为学术界预测和识别问题论文提供了新的工具，也为社交媒体讨论作为论文撤回早期预警系统的潜力提供了证据。研究人员的工作表明，ChatGPT等生成人工智能在促进科研诚信方面具有巨大的应用潜力。

研究的作者之一，Er-Te Zheng(郑尔特)是中国人民大学信息资源管理学院的硕士生。他的研究方向包括计算社会科学、科学和科学计量。另一位作者，Hui-Zhen Fu(傅慧珍)是浙江大学公共管理学院信息资源管理系副教授。她的研究方向是交叉科学、科学计量、科研诚信和科研管理。而Zhichao Fang(方志超)是中国人民大学信息资源管理学院的助理教授。他的研究方向是科学、科学计量和社交媒体计量。