超90%论文算法不可复现,你为何不愿公开代码?人工智能(AI)这个蓬勃发展的领域正面临着实验重现的危机,就像实验重现问题过去十年来一直困扰着心理学、医学以及其他领域一样。他们没有足够时间在每种条件下都测试算法,或者在文章中记录他们尝试过的每个超参数。
目前正在复现一篇paper的代码,工作还没有完成,这里作为自己的经验总结。首先必须得说,复现他人的程序实在是迫不得已的事情。要么源码无法要到,要么就是不符合自己的编程习惯或者输入输出不能够对应得上。通过p…
标题:不会写代码,论文复现也复现不好,本科也没有做过这方面的东西,好烦好废柴好想退学.研一,真的是废柴,本科自动化,现在老师让做监测互相诊断方向的,现在论文复现也卡壳。.以前很少很少写代码,哎好烦。.现在真的也不想做不想搞这些,做也...
作为一个在复现论文中踩坑无数,好不容易走出来的人,简单说一下我的看法。例子1:我是活体检测落地的,老师当时跟我说,旷视能做出来,你应该也可以做个差不多的吧(微笑)。然后我就开始的漫长的算法复现道路。后来很久以后发现了两件事。
要调试科研代码是非常难的,这需要不同的思维方式,对细节的把控超越你的想象。对于科研代码,特别是数值和数据驱动的代码,bug不会以崩溃的方式显现;这些bug通常正常运行,但是会产生破坏性的后果。你有责任验证每一行代码都是正确的。
理想的论文什么样?1.效果可以复现,论文里每一个实验逻辑都很通畅,论文所有实验形成的逻辑链完备,使用公开数据集,效果和论文基本一致。能够达到这种的一般是领域内的大佬,比如陈天奇、何恺明。2.使用公开数据,公开代码,论文细节清楚,能复现
我当时在复现论文的时候,在网上搜索了相关的内容,但是可参考的内容少之又少。为此,我将自己复现第一篇论文的心路历程以及经验教训记录下来,希望可供将来复现科研论文的同学借鉴。在某个风和日丽…
按这个意见,需要提供源代码吗?.之前投了ieeeSPL,被拒了,准备改后重投。.其中一个审稿人是给了肯定的意见,他给了一段肯定的评论之后,空了一行,写了下面的话:.Iwillrecommendyourpaperforpublicationontheconditionthatyourpostyourcode(inawelldocumentedform)on...
过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。这是今年AAAI会议上一个严峻的报告。科学家们正在通过“可复现性挑战”鼓励复现新算法,或研究依据论文自动生成代码的工具。
原标题:【AI幽灵】超90%论文算法不可复现,你为何不愿公开代码?.【导读】过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。.这是今年AAAI会议上一个严峻的报告。.科学家们正在...
超90%论文算法不可复现,你为何不愿公开代码?人工智能(AI)这个蓬勃发展的领域正面临着实验重现的危机,就像实验重现问题过去十年来一直困扰着心理学、医学以及其他领域一样。他们没有足够时间在每种条件下都测试算法,或者在文章中记录他们尝试过的每个超参数。
目前正在复现一篇paper的代码,工作还没有完成,这里作为自己的经验总结。首先必须得说,复现他人的程序实在是迫不得已的事情。要么源码无法要到,要么就是不符合自己的编程习惯或者输入输出不能够对应得上。通过p…
标题:不会写代码,论文复现也复现不好,本科也没有做过这方面的东西,好烦好废柴好想退学.研一,真的是废柴,本科自动化,现在老师让做监测互相诊断方向的,现在论文复现也卡壳。.以前很少很少写代码,哎好烦。.现在真的也不想做不想搞这些,做也...
作为一个在复现论文中踩坑无数,好不容易走出来的人,简单说一下我的看法。例子1:我是活体检测落地的,老师当时跟我说,旷视能做出来,你应该也可以做个差不多的吧(微笑)。然后我就开始的漫长的算法复现道路。后来很久以后发现了两件事。
要调试科研代码是非常难的,这需要不同的思维方式,对细节的把控超越你的想象。对于科研代码,特别是数值和数据驱动的代码,bug不会以崩溃的方式显现;这些bug通常正常运行,但是会产生破坏性的后果。你有责任验证每一行代码都是正确的。
理想的论文什么样?1.效果可以复现,论文里每一个实验逻辑都很通畅,论文所有实验形成的逻辑链完备,使用公开数据集,效果和论文基本一致。能够达到这种的一般是领域内的大佬,比如陈天奇、何恺明。2.使用公开数据,公开代码,论文细节清楚,能复现
我当时在复现论文的时候,在网上搜索了相关的内容,但是可参考的内容少之又少。为此,我将自己复现第一篇论文的心路历程以及经验教训记录下来,希望可供将来复现科研论文的同学借鉴。在某个风和日丽…
按这个意见,需要提供源代码吗?.之前投了ieeeSPL,被拒了,准备改后重投。.其中一个审稿人是给了肯定的意见,他给了一段肯定的评论之后,空了一行,写了下面的话:.Iwillrecommendyourpaperforpublicationontheconditionthatyourpostyourcode(inawelldocumentedform)on...
过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。这是今年AAAI会议上一个严峻的报告。科学家们正在通过“可复现性挑战”鼓励复现新算法,或研究依据论文自动生成代码的工具。
原标题:【AI幽灵】超90%论文算法不可复现,你为何不愿公开代码?.【导读】过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。.这是今年AAAI会议上一个严峻的报告。.科学家们正在...