论文代码是否应该公开已是争论已久的问题,有从业者呼吁通过代码提交减少当下各类论文中的「水分」,也有研发人员表示「代码提交」类问题得因「研究」而异。不过单从我们最关心的各类顶会而言,似乎可以简单从三个…
强行复现别人论文,也未必达到其论文呈现的性能。更可怕的是A论文中了不开源,B论文复现了A在另一模型上的实验中了也不开源。这就导致后人可能被质疑,你看虽然A没开源,但人家B却用的好好的,而B也没开源。B很可能是A的熟人,可以获得代码。
超90%论文算法不可复现,你为何不愿公开代码?人工智能(AI)这个蓬勃发展的领域正面临着实验重现的危机,就像实验重现问题过去十年来一直困扰着心理学、医学以及其他领域一样。他们没有足够时间在每种条件下都测试算法,或者在文章中记录他们尝试过的每个超参数。
但不公开代码就直接拒绝未免过于「一刀切」,毕竟,可复现性并不是评价论文的唯一标准。可复现性是重要的属性,但不是唯一的属性如果对强制要求可复现性进行「一刀切」,将导致非常糟糕的…
论文代码是否应该「强制」开源?.近日,一位网友在Reddit社区呼吁,希望所有研究者都能在发表论文的同时公开自己的代码,否则应该被直接拒绝。.发起人认为,任何形式的研究行为均可看做对知识体系的贡献,并终将造福于人类社会。.在他看来,不将...
过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。这是今年AAAI会议上一个严峻的报告。科学家们正在通过“可复现性挑战”鼓励复…
最后中没中我不知道,但这事足以说明,圈子内不公开数据和代码的生态环境给了一些人大胆造假的勇气。至于是否公开参数和调参数方法,这个很大程度上取决于作者的人品。很多人都会在论文里写清楚怎么调的,代码里也有demo,用起来不难。
论文官方提醒可以在这个网站提交提交代码。.也看到很多别人的data+code。.4.直接看论文。.有的论文直接在正文中告诉你相关模型,数据,代码在哪可以找到,.也有很多论文直接在脚注里面注明相关data,code的网址。.注意,不一定在首页和末尾,很可能...
大家好。有一个经典论文上的算法,我费了好大劲才实现,但是不能还原实验结果。这是一篇经典论文提出的算法,无数的论文都引用过,所以人家的数据不可能有问题。我还原不了应该是我的代码写的有问题。原作者是宾夕法尼亚大学的学者(不知道是不是教授),我想发个邮件问人家要源代码...
按这个意见,需要提供源代码吗?.之前投了ieeeSPL,被拒了,准备改后重投。.其中一个审稿人是给了肯定的意见,他给了一段肯定的评论之后,空了一行,写了下面的话:.Iwillrecommendyourpaperforpublicationontheconditionthatyourpostyourcode(inawelldocumentedform)on...
论文代码是否应该公开已是争论已久的问题,有从业者呼吁通过代码提交减少当下各类论文中的「水分」,也有研发人员表示「代码提交」类问题得因「研究」而异。不过单从我们最关心的各类顶会而言,似乎可以简单从三个…
强行复现别人论文,也未必达到其论文呈现的性能。更可怕的是A论文中了不开源,B论文复现了A在另一模型上的实验中了也不开源。这就导致后人可能被质疑,你看虽然A没开源,但人家B却用的好好的,而B也没开源。B很可能是A的熟人,可以获得代码。
超90%论文算法不可复现,你为何不愿公开代码?人工智能(AI)这个蓬勃发展的领域正面临着实验重现的危机,就像实验重现问题过去十年来一直困扰着心理学、医学以及其他领域一样。他们没有足够时间在每种条件下都测试算法,或者在文章中记录他们尝试过的每个超参数。
但不公开代码就直接拒绝未免过于「一刀切」,毕竟,可复现性并不是评价论文的唯一标准。可复现性是重要的属性,但不是唯一的属性如果对强制要求可复现性进行「一刀切」,将导致非常糟糕的…
论文代码是否应该「强制」开源?.近日,一位网友在Reddit社区呼吁,希望所有研究者都能在发表论文的同时公开自己的代码,否则应该被直接拒绝。.发起人认为,任何形式的研究行为均可看做对知识体系的贡献,并终将造福于人类社会。.在他看来,不将...
过去几年发表的AI顶会论文提出的400种算法中,公开算法代码的只占6%,只有三分之一分享了测试数据,只有一半分享“伪代码”。这是今年AAAI会议上一个严峻的报告。科学家们正在通过“可复现性挑战”鼓励复…
最后中没中我不知道,但这事足以说明,圈子内不公开数据和代码的生态环境给了一些人大胆造假的勇气。至于是否公开参数和调参数方法,这个很大程度上取决于作者的人品。很多人都会在论文里写清楚怎么调的,代码里也有demo,用起来不难。
论文官方提醒可以在这个网站提交提交代码。.也看到很多别人的data+code。.4.直接看论文。.有的论文直接在正文中告诉你相关模型,数据,代码在哪可以找到,.也有很多论文直接在脚注里面注明相关data,code的网址。.注意,不一定在首页和末尾,很可能...
大家好。有一个经典论文上的算法,我费了好大劲才实现,但是不能还原实验结果。这是一篇经典论文提出的算法,无数的论文都引用过,所以人家的数据不可能有问题。我还原不了应该是我的代码写的有问题。原作者是宾夕法尼亚大学的学者(不知道是不是教授),我想发个邮件问人家要源代码...
按这个意见,需要提供源代码吗?.之前投了ieeeSPL,被拒了,准备改后重投。.其中一个审稿人是给了肯定的意见,他给了一段肯定的评论之后,空了一行,写了下面的话:.Iwillrecommendyourpaperforpublicationontheconditionthatyourpostyourcode(inawelldocumentedform)on...