最先一波评论基于事件本身,不少网友感慨论文“难以复现”是当下科研面临的一大难题,自己深受其害。 也有针对p1esk本身质疑的质疑。 网友alexmlamb研究了p1esk的复现方法后,觉得“PNN无效”的结论有些站不住脚,且复现中给出的实际准确率和报告中提到的准确率在100次迭代时相差并不多。
所谓论文复现,是指研究人员重现某篇论文的结果。如果想把一篇论文的算法落地, 肯定要去复现;如果一个新点子是在某篇论文基础上做改进,也需要先复现论文;如果想把一个新算法与某论文的算法做对比,也要把论文复现之。
关于内容 :论文的学术价值是核心,而核心价值的重要体现是内容的呈现和可信度。 然而中文期刊论文一般不提供技术细节和源代码,很难复现实验过程。这点中文期刊一直做的不是很好,有时感觉看了论文,大思路、通用原理讲得头头是道,就是实验部分没法复现,实验结果到底是不是用论文 ...
超 90% 论文算法不可复现,你为何不愿公开代码?人工智能(AI)这个蓬勃发展的领域正面临着实验重现的危机,就像实验重现问题过去十年来一直困扰着心理学、医学以及其他领域一样。他们没有足够时间在每种条件下都测试算法,或者在文章中记录他们尝试过的每个超参数。
【导读】来自意大利米兰理工大学的 Maurizio 团队近日发表了一篇极具批判性的文章,剑指推荐系统领域的其他数十篇论文,指出这些论文中基于深度学习的推荐算法大部分都存在不同程度的数据集缺失和源码缺失,导致它们无法复现,而那些可复现的算法,其性能也难以达到预期,甚至难以超越 ...
其实,发文章并没有想象的那么难,只要你静下心来,按照下面的步骤操作就好。 朦胧期:选定大致研究方向,粗读该领域的相关文献。由于楼主已经将研究方向定位在“港口竞争与合作”,可以通过中国知网、EI、SCI等数据库检索相关期刊的参考文献,了解该领域的主流研究内容、研究方法、研究 ...
如何参与呢?. 一起来看。. 流程与要求. 挑战者需要从所支持会议的 论文列表 中获取论文,但是显示“已领取”的论文除外,而且每人最多只能复现2篇论文。. 此外,挑战者还需加入Discord 社区 的#ml-reproducibility频道。. 接着就到了复现这一步,挑战者用作者 ...
机器之心报道 编辑:蛋酱 在 Papers 「Without」 Code 网站上,复现不了的论文可是要被公开处刑的,作者也可能面临「社会性死亡」。 「无法复现的论文都是耍流氓。」 二十几天前,
全世界最聪明的人们正在前赴后继地投入对AI的研究,但伴随着一个又一个惊人的成果发布,最基本的事情却出问题了——不同研究者之间没法“对话”了。论文复现难在成都电子科技大学做活体检测方向研究的韦仕才依然记得自己的一次AI项目的糟糕经历。
ML顶会论文都可复现吗?来挑战一下,还能拿500美元补贴,论文,复现,ml,挑战者 月石一 发自 凹非寺 量子位 报道 | 公众号 QbitAI Paper with Code发起了第5届机器学习再现性挑战(MLRC)。 这一次不仅支持的会议有所增加,挑战者还能获得500美元的资金支持!
最先一波评论基于事件本身,不少网友感慨论文“难以复现”是当下科研面临的一大难题,自己深受其害。 也有针对p1esk本身质疑的质疑。 网友alexmlamb研究了p1esk的复现方法后,觉得“PNN无效”的结论有些站不住脚,且复现中给出的实际准确率和报告中提到的准确率在100次迭代时相差并不多。
所谓论文复现,是指研究人员重现某篇论文的结果。如果想把一篇论文的算法落地, 肯定要去复现;如果一个新点子是在某篇论文基础上做改进,也需要先复现论文;如果想把一个新算法与某论文的算法做对比,也要把论文复现之。
关于内容 :论文的学术价值是核心,而核心价值的重要体现是内容的呈现和可信度。 然而中文期刊论文一般不提供技术细节和源代码,很难复现实验过程。这点中文期刊一直做的不是很好,有时感觉看了论文,大思路、通用原理讲得头头是道,就是实验部分没法复现,实验结果到底是不是用论文 ...
超 90% 论文算法不可复现,你为何不愿公开代码?人工智能(AI)这个蓬勃发展的领域正面临着实验重现的危机,就像实验重现问题过去十年来一直困扰着心理学、医学以及其他领域一样。他们没有足够时间在每种条件下都测试算法,或者在文章中记录他们尝试过的每个超参数。
【导读】来自意大利米兰理工大学的 Maurizio 团队近日发表了一篇极具批判性的文章,剑指推荐系统领域的其他数十篇论文,指出这些论文中基于深度学习的推荐算法大部分都存在不同程度的数据集缺失和源码缺失,导致它们无法复现,而那些可复现的算法,其性能也难以达到预期,甚至难以超越 ...
其实,发文章并没有想象的那么难,只要你静下心来,按照下面的步骤操作就好。 朦胧期:选定大致研究方向,粗读该领域的相关文献。由于楼主已经将研究方向定位在“港口竞争与合作”,可以通过中国知网、EI、SCI等数据库检索相关期刊的参考文献,了解该领域的主流研究内容、研究方法、研究 ...
如何参与呢?. 一起来看。. 流程与要求. 挑战者需要从所支持会议的 论文列表 中获取论文,但是显示“已领取”的论文除外,而且每人最多只能复现2篇论文。. 此外,挑战者还需加入Discord 社区 的#ml-reproducibility频道。. 接着就到了复现这一步,挑战者用作者 ...
机器之心报道 编辑:蛋酱 在 Papers 「Without」 Code 网站上,复现不了的论文可是要被公开处刑的,作者也可能面临「社会性死亡」。 「无法复现的论文都是耍流氓。」 二十几天前,
全世界最聪明的人们正在前赴后继地投入对AI的研究,但伴随着一个又一个惊人的成果发布,最基本的事情却出问题了——不同研究者之间没法“对话”了。论文复现难在成都电子科技大学做活体检测方向研究的韦仕才依然记得自己的一次AI项目的糟糕经历。
ML顶会论文都可复现吗?来挑战一下,还能拿500美元补贴,论文,复现,ml,挑战者 月石一 发自 凹非寺 量子位 报道 | 公众号 QbitAI Paper with Code发起了第5届机器学习再现性挑战(MLRC)。 这一次不仅支持的会议有所增加,挑战者还能获得500美元的资金支持!