您当前浏览器版本过低，为了不影响您的使用，建议您使用最新的谷歌浏览器、火狐浏览器、 360浏览器，更换浏览器后使用更流畅！（注意！双核浏览器请切换为极速模式）
工信部人工智能赋能中小企业典型应用场景案例（科研领域）
首页 学术头条 学术问答坊 科研动态 文章详情

ChatGPT竟成Nature审稿人？近5000篇论文实测，82.4%作者表示很有帮助！

2023-10-12
42122

GPT-4，已经成功晋身审稿人！


最近，来自斯坦福大学等机构的研究者把3,096篇Nature系列论文和1,709篇ICLR等顶会文章丢给了GPT-4，让它生成评审意见、修改建议，然后和人类审稿人给出的意见相比较。

0a89abd037436801fe7057cd03a3de8.png
论文地址：https://arxiv.org/abs/2310.01783

结果，GPT-4不仅完美胜任了这项工作，甚至比人类做得还好！


它给出的意见中，超50%和至少一名人类审稿人一致。

另有超过82.4%的作者表示，GPT-4给出的意见相当有帮助，而且大多数用户打算再次使用LLM反馈系统。

论文作者James Zou总结道：我们仍然需要高质量的人工反馈，但LLM可以帮助作者在正式的同行评审之前，改进自己的论文初稿。

4eebd6dede5b26f06dcb92c144be79f.png

以下是对同一篇ICLR论文的LLM评论和人类评论，可以看出，LLM的眼光很毒辣，评论很一针见血。

比如与先前研究的对比上，人类审稿员表示：
比较是有缺陷的。尤其是GNN方法的标签一致性和中心一致性损失都没有考虑到。更公平的比较应该是使用两种损失都考虑到的GNN方法。

而GPT-4的评价是：
论文缺乏与现有方法的彻底的比较。虽然作者对于一些方法比较了基线，但还需要更全面的比较。

7171d6507956b962d24bfd4e49d9958.png

在理论可靠性上，人类审稿人给出了这样的意见——
恕我直言，理论的证明太琐碎了。最终结论是如果相似度合适，预测的动作就是准确的。由于模型正在学习正确的相似度，也就相当于说模型h如果经过良好的训练，输出就是正确的。这是显然的事。

而GPT-4的意见是：
作者应该提供更多理论分析，来比较信息传递和一致性约束之间的联系，这样能让读者更易于理解。
840fd4d3ad2dd080104a00b57d5aa56.png

在研究的可复现性上，人类审稿员希望论文能够提供代码，好让其他读者也能复现实验。

GPT-4对此也给出了相同意见：「作者应该提供有关实验设置的更多详细信息，来确保研究的可复现性。」

d9c863960d7c4918df3d82d9addb0f3.png


这项研究让我们知道，LLM确实可以用作改论文神器了！

版权声明：文章来源新智元，分享只为学术交流，如涉及侵权问题请联系我们，我们将及时修改或删除。


已收藏 0
点赞 18
上一篇：重磅！2023年度诺贝尔奖名单全面揭晓！ 下一篇：颜宁，再发高水平期刊！

学术会议

更多
【IEEE冠名|华南理工大学主办】第七届IEEE计算机工程与智能控制国际学术会议（IEEE-ICCEIC 2026）
【IEEE冠名|华南理工大学主办】第七届IEEE计算机工程与智能控制国际学术会议（IEEE-ICCEIC 2026）
第七届计算机工程与智能控制国际学术会议（ICCEIC 2026）将于2026年10月16日至18日在广州举办，聚焦计算机工程与智能控制前沿，涵盖网络安全、硬件系统、软件工程、嵌入式创新等多个核心议题
2026-10-16
【斯普林格出版，EI检索稳定】第十二届水利、土木工程国际学术会议暨丝路国际深地储能与地下空间开发（ICHCE&SRIF 2026）
【斯普林格出版，EI检索稳定】第十二届水利、土木工程国际学术会议暨丝路国际深地储能与地下空间开发（ICHCE&SRIF 2026）
第十二届水利、土木工程国际学术会议由西安建筑科技大学和陕西省岩土力学与工程学会联合主办。会议主题为“工程智能建造”。本次会议将汇聚国内外顶尖学者、企业领袖与技术先锋，共同分享最新研究成果、典型实践案例
2026-10-16
【SPIE出版| SCI期刊同步征稿】第六届计算机图形学、人工智能与数据处理国际学术会议（ICCAID 2026）
【SPIE出版| SCI期刊同步征稿】第六届计算机图形学、人工智能与数据处理国际学术会议（ICCAID 2026）
第六届计算机图形学、人工智能与数据处理国际学术会议（ICCAID 2026）将于2026年10月16-18日在中国南昌举行。本次会议由南昌航空大学主办，主要围绕“计算机图形学、人工智能与数据
2026-10-16
【SPIE出版｜EI稳定｜往届已检索】第二届电子信息工程与光电材料国际学术会议（OMEIE 2026）
【SPIE出版｜EI稳定｜往届已检索】第二届电子信息工程与光电材料国际学术会议（OMEIE 2026）
第二届电子信息工程与光电材料国际学术会议定于2026年10月9至11日在江西南昌市召开，会议旨在为“电子信息工程与光电材料”领域的专家、学者提供一个可交流学术成果的平台。
2026-10-09
【EI稳定检索|经济、管理、大数据可接收】第二届人工智能、业务转型和数据科学创新国际学术会议（ICBTDS 2026）
【EI稳定检索|经济、管理、大数据可接收】第二届人工智能、业务转型和数据科学创新国际学术会议（ICBTDS 2026）
探讨AI技术前沿、分享最佳实践、促进跨界合作，第二届人工智能、业务转型和数据科学创新国际学术会（ICBTDS 2026）议将于2026年10月09-11日在中国-南京隆重召开
2026-10-09
【IEEE丨多场平行Workshop丨EI期刊同步征稿】第六届智能电力与系统国际学术会议（ICIPS 2026）
【IEEE丨多场平行Workshop丨EI期刊同步征稿】第六届智能电力与系统国际学术会议（ICIPS 2026）
第六届智能电力与系统国际学术会议（ICIPS 2026）拟于2026年10月24-26日在辽宁大连召开。 电力丨电子丨电气丨能源丨储能丨电网丨半导体丨物联网丨计算机丨人工智能丨大数据
2026-10-24
相关资讯

最新！2023两院院士增选有效候选人公布

最新消息！中国科学院及中国工程院都发布了2023年院士增选有效候选人名单的公告。

55782

23

2023-08-31

重磅！重新组建科学技术部！

3月7日，十四届全国人大一次会议在北京人民大会堂举行第二次全体会议，根据国务院关于提请审议国务院机构改革方案的议案，重新组建科学技术部。

55005

20

2023-03-07

985最新《Science》！重磅成果，世界上首次实现该突破！

三所985高校合作完成的最新科研成果《借位错实现陶瓷拉伸塑性变形》发表在国际顶级期刊《科学》（Science）！

7448

2

2024-08-02

211教授，出任高水平期刊副主编！

近日，福州大学土木工程学院赖志超教授应美国土木工程师学会《Journal of Structural Engineering》期刊邀请，出任该期刊副主编（Associate Editor），成为中国内地第4位担任该期刊副主编的学者。

7123

4

2024-07-25

985/211携手发刊！一滴水，登上Nature子刊！

自1859年以来，人们观察到离子在窄通道中沿压力驱动的水流运动，这种现象称为顺流离子传输。

6678

9

2024-07-23
最新文章
热门标签
#SCI
#文献
#期刊投稿
#EI会议论文
#论文发表
#IEEE会议
#学术会议
#论文格式
#论文前言
#会议论文

热门推荐

我们的服务
会议解决方案
SCI全程无忧
全球智库平台
期刊智能匹配
APP下载
期刊合作
最新文章
关于我们
平台介绍
联系我们
学术诚信
ISO认证
帮助中心
常见问题
客服中心
服务热线：400-607-9388
服务邮箱：customer_services@ais.cn

艾思科蓝公众号

艾思科蓝小程序

Copyright © 2019 - 2026 广州科奥信息技术股份有限公司 All Rights Reserved

增值电信业务许可证：合字B2-20250773 粤ICP备16087321号 粤公网安备 44010402002119
立即开启