是否可以训练神经网络通过视频片段学习一些东西?

人工智能 神经网络 机器学习 训练 图像处理
2021-11-03 21:13:14

是否可以训练神经网络通过视频片段(本质上是一系列图像)来学习一些东西?

换句话说,如果我有一个视频教我如何从头开始画动物,我可以用这个视频教计算机以同样的方式画动物吗?

有许多机器学习和图像处理技术(例如 RNN)可以应用于图像或视频序列。所以,我想困难的部分变成了将活动映射到移动笔之类的动作。

3个回答

简短的回答:没有。

长答案:神经网络是将输入数据(例如图片)映射到输出数据(例如图片包含狗的概率)的函数。您提出的建议似乎不是该工具适合的那种任务,尽管我不愿意声称它无法完成。

如果您对计算机生成的艺术作品感兴趣,我鼓励您了解生成对抗网络风格迁移

就像另一个答案一样 - 它真的不能那样做。但是,您可能想看看Google Deepdream,它实际上增强了图像看起来更像他们检测到的内容。例如,如果检测到猫,它将使图片更像猫。

关于您在评论中提到的屏幕截图:不要忘记 NN 从学习中构建映射。只有一个屏幕截图,您将只能构建一个为该屏幕截图输出正确 3D 的 NN。使用许多屏幕截图,您可能会更接近您想要的(AFAI 了解您的问题)。
但请记住,如果没有 2 只眼睛,3D 对象就会出现问题。不代表不可能。
我建议您也看看卷积神经网络https://en.wikipedia.org/wiki/Convolutional_neural_network