作为一个在复现论文中踩坑无数,好不容易走出来的人,简单说一下我的看法。.例子1:我是活体检测落地的,老师当时跟我说,旷视能做出来,你应该也可以做个差不多的吧(微笑)。.然后我就开始的漫长的算法复现道路。.后来很久以后发现了两件事。.一...
DanielHolden在角色动画和深度学习的领域做了很多出色的工作,我偶然看到他的一篇博文,很受启发。因为真的喜欢,所以我尝试翻译大体内容,分享他的经验之谈。以下出自DanielHolde
目前正在复现一篇paper的代码,工作还没有完成,这里作为自己的经验总结。首先必须得说,复现他人的程序实在是迫不得已的事情。要么源码无法要到,要么就是不符合自己的编程习惯或者输入输出不能够对应得上。通过p…
超90%论文算法不可复现,你为何不愿公开代码?人工智能(AI)这个蓬勃发展的领域正面临着实验重现的危机,就像实验重现问题过去十年来一直困扰着心理学、医学以及其他领域一样。他们没有足够时间在每种条件下都测试算法,或者在文章中记录他们尝试过的每个超参数。
普通研究者没有那么强大的硬件资源,估计达不到他们的1%的算力,根本无法复现算法。三、数据划分和训练方式有些论文公开了代码,也公开了数据,但是论文里没有提到数据划分问题,数据如果比较少的话,不同的划分会导致结果不同。四、众所周知的原因
过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。这是今年AAAI会议上一个严峻的报告。科学家们正在通过“可复现性挑战”鼓励复…
小白的经典CNN复现系列(一):LeNet-1989之前的浙大AI作业的那个系列,因为后面的NLP的东西我最近大概是不会接触到,所以我们先换一个系列开始更新博客,就是现在这个经典的CNN复现啦(。
如果我们不能在没有作者代码的情况下复现论文的结果,这可能表明论文本身并没有成功地囊括重要的科学贡献。在这之后,我们才会考虑代码中...
注意,不是没有润色,而是论文该写的部分没有写完!这位审稿人在reddit上讲述了他的内心独白,表示他审阅的论文投稿中超过一半没有完稿,而他们审稿人却要花费6-7个小时甚至10个小时以上来审阅一篇这样的稿件,这对审稿人未免也太不尊重了!
网友称,他没有发现任何一篇论文复现了原始ResNet网络的结果,或与原始残差网络论文的结果进行比较,并且所有的论文报告的数字都比原始论文的更差。.何恺明等人在2015年提出ResNet之后,ResNet很快成为计算机视觉最流行的架构之一,这篇论文已经被引用了...
作为一个在复现论文中踩坑无数,好不容易走出来的人,简单说一下我的看法。.例子1:我是活体检测落地的,老师当时跟我说,旷视能做出来,你应该也可以做个差不多的吧(微笑)。.然后我就开始的漫长的算法复现道路。.后来很久以后发现了两件事。.一...
DanielHolden在角色动画和深度学习的领域做了很多出色的工作,我偶然看到他的一篇博文,很受启发。因为真的喜欢,所以我尝试翻译大体内容,分享他的经验之谈。以下出自DanielHolde
目前正在复现一篇paper的代码,工作还没有完成,这里作为自己的经验总结。首先必须得说,复现他人的程序实在是迫不得已的事情。要么源码无法要到,要么就是不符合自己的编程习惯或者输入输出不能够对应得上。通过p…
超90%论文算法不可复现,你为何不愿公开代码?人工智能(AI)这个蓬勃发展的领域正面临着实验重现的危机,就像实验重现问题过去十年来一直困扰着心理学、医学以及其他领域一样。他们没有足够时间在每种条件下都测试算法,或者在文章中记录他们尝试过的每个超参数。
普通研究者没有那么强大的硬件资源,估计达不到他们的1%的算力,根本无法复现算法。三、数据划分和训练方式有些论文公开了代码,也公开了数据,但是论文里没有提到数据划分问题,数据如果比较少的话,不同的划分会导致结果不同。四、众所周知的原因
过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。这是今年AAAI会议上一个严峻的报告。科学家们正在通过“可复现性挑战”鼓励复…
小白的经典CNN复现系列(一):LeNet-1989之前的浙大AI作业的那个系列,因为后面的NLP的东西我最近大概是不会接触到,所以我们先换一个系列开始更新博客,就是现在这个经典的CNN复现啦(。
如果我们不能在没有作者代码的情况下复现论文的结果,这可能表明论文本身并没有成功地囊括重要的科学贡献。在这之后,我们才会考虑代码中...
注意,不是没有润色,而是论文该写的部分没有写完!这位审稿人在reddit上讲述了他的内心独白,表示他审阅的论文投稿中超过一半没有完稿,而他们审稿人却要花费6-7个小时甚至10个小时以上来审阅一篇这样的稿件,这对审稿人未免也太不尊重了!
网友称,他没有发现任何一篇论文复现了原始ResNet网络的结果,或与原始残差网络论文的结果进行比较,并且所有的论文报告的数字都比原始论文的更差。.何恺明等人在2015年提出ResNet之后,ResNet很快成为计算机视觉最流行的架构之一,这篇论文已经被引用了...