我强烈认为,虽然我理解他们在运营这个平台时所面临的挑战,但这是错误的决定。Arxiv在实践中与现实中的情况截然不同。 在实践中,已经有了审查规则,但由于人手不足,这些规则几乎没有得到执行,实际上是不存在的。看看像Schaeffer, Rylan的论文《在测试集上预训练就是你所需要的一切》。arXiv预印本arXiv:2309.08632(2023)。还有更多类似的案例。Arxiv的审查已经成为一个不可预测的黑箱,阻碍了研究的传播和研究生态系统的可预测性。 重要的是要注意,Arxiv有政策规定,使得这些学生项目、可能的RLHF书籍以及其他常见发布的内容是"不允许的"。 事实上,Arxiv应该朝相反的方向发展。成为一个每个人都接受任何计算机科学研究的平台,然后再判断其质量。 这感觉像是Arxiv缓慢死亡的早期阶段。在2-3年内,他们会对"技术"研究说同样的话,然后要求进行同行评审。所有这些只会延迟研究的发表,因为同行评审需要时间。同时,同行评审在AI时代正在被完全重建,这将需要更长的时间来修复。 同行评审将被重新设计为以AI为主,辅以人类监督。目前假设全部由人类进行。在20年后,这将是一个非常不同的过程。 在Arxiv对技术工作实施同行评审要求后,这个平台将缓慢走向死亡。会有竞争对手出现。一个滑坡已经开始,我很乐意与团队讨论,因为这似乎是一个两败俱伤的交易。 例如,凭借这一点,我将永远无法在Arxiv上发布我的RLHF书籍PDF,尽管它的需求极高,并且可能是一个非常受欢迎的PDF(比我的许多研究工作更受欢迎)。 保持Arxiv作为默认选择。我们不希望这个平台由盈利公司运营。研究的托管和开放获取是人类的基本胜利。弄清楚如何进行策展是AI时代的新问题,请不要将其留给我们有些破碎的同行评审机构。让它成为一个新的、以AI为本的东西。迎接未来。 更新Arxiv的政策以反映现实,而不是一个可能无法实现的滑坡目标。