超90%论文算法不可复现,你为何不愿公开代码?.过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。.这是今年AAAI会议上一个严峻的报告。.科学家们正在通过“可复现性挑战”鼓励复现新算法,或研究依据论文自动生成代码的工具。.AI将在未来扮演越来越重要的角色,我们...
659人赞同了该文章.过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。.这是今年AAAI会议上一个严峻的报告。.科学家们正在通过“可复现性挑战”鼓励复现新算法,或研究依据论文自动生成代码的工具。.AI将在未来扮演越来越重要的角色,我们需要信任这些AI,那么我们必须...
顶会的可复现性问题存在也不是一两天了,那么顶刊也可见一番,每年三大顶会能复现出来的有一半就不错了,之前还有说90%都不能复现的...。有效的也许不是方法,而是trick---同学复现的那篇论文。
编译:克雷格、Marvin.【新智元导读】过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。.这是今年AAAI会议上一个严峻的报告。.科学家们正在通过“可复现性挑战”鼓励复现新算法,或研究依据论文自动生成代码的工具。.AI将在未来扮演越来越重要的角色,我们需要信任这些AI,那么...
顶会的可复现性问题存在也不是一两天了,那么顶刊也可见一番,每年三大顶会能复现出来的有一半就不错了,之前还有说90%都不能复现的...。有效的也许不是方法,而是trick---同学复现的那篇论文。
刚接触论文时,我们常常听到要研究论文就头大,想到论文就排斥。.那问题来了,想找到论文的创新点,必须要吃透经典Paper。.但大部分学员一看到论文就....①研究论文时无法透彻理解paper,不能复现代码.②无法提出创新优化方案,导致论文发不出.③还有无法按照技术演进思路,系统学习深度学习知识.④不知道从哪个论文资源平台找论文.所以,有同学调侃...
④选择有代码论文:我们都知道Talkischeap.Showmethecode。这句经典名言。有代码复现的论文,不仅质量有保证的,在你实操复现的过程中,才能得到及时的反馈和收获。毕竟很多论文的实验结果无法复现,那么我们读了可能也没什么作用。2.如何查找
昨天,ID为p1esk的网友在Reddit论坛提出,国际顶会CVPR18的接收论文PerturbativeNeuralNetworks(扰动神经网络)有点不对劲。.这篇论文自称提出了一种轻量且高效的模型,可以当作卷积神经网络的替代品,且准确率高达90.53%。.在多次动手实操之后,网友p1esk发现得到的最高准确率仅为85.91%,结果根本无法复现。.论文复现难,这个存在于整合学术圈的普遍且严重的...
复现论文一定要向交女朋友一样,切记不可操之过急。.第一点:下载论文原著,弄懂其中的参数设置与流程,切记不可胡乱摘抄网上现有的什么论文分析,往往这些人大都是小白。.第二点:耐心,耐心,耐心,慢慢来,不捉急,温水煮青蛙。.第三点:遇到不懂的,一定要查找资料。.第四步:祝贺你,已经取得成功了。.最后,复现20篇以后你会发现,我怎么...
还有一些顶会(ICML、ICLR、NeurIPS)要求投稿人在提交论文的时候附上代码,以供审稿人测试,确保其研究结果的可复现性。但这一切仍然不代表论文复现变得容易了。