“从论文中复制性能的深度学习算法的重新实现”是什么意思?

人工智能 神经网络 深度学习 文件 研究 执行
2021-10-29 08:47:39

OpenAI 的机器学习研究员职位上,它是这样写的

我们寻找具有以下一项或多项资格的候选人:

  • ...
  • 深度学习算法的开源重新实现,复制了论文中的性能

他们到底是什么意思?他们是否希望我们完全按照论文中的描述实现算法(即使用相同的超参数、权重等)?

2个回答

伴随相关代码的 ML/AI(和一般的计算机科学)论文是非常可取的,这既是为了论文结果的可重复性,也是为了更快地将这些结果集成到应用程序中。

一些研究人员自己这样做;但这最近也成为了一项社区工作,第三个独立的个人或团队,不隶属于论文作者,从论文开始提供代码实现。

一个很好的、最近的案例是World Models论文的复制(博客文章Github repo)。Papers with Code中提供的许多实现确实是由社区提供的。

一篇关于这种努力的精彩文章,包含许多经验教训,最近引起了人们的热烈反响:Reproduced a Deep Reinforcement Learning Paper 的经验教训

可以理解的是,在简历中做出这样努力的个人是一个很好的招聘选择……

我相信这一点:

  • “深度学习算法的重新实现” 他要求他们正在寻找已经制造并完成了与论文中给出的相似或完全相同的人工智能的人(IDK 哪些论文)
  • “开源”同修希望能够看到项目的源代码。