如何用 Spark 实现 LSTM?

数据挖掘 深度学习 lstm 阿帕奇火花
2021-10-11 16:08:09

我想用 构建一个LSTM用于文本分类的网络PySpark,但我没有找到任何关于它的库或函数。

是否有可能实现这种网络Spark

1个回答

Apache Spark 目前没有深度学习库。但是,您可以在集群上运行 TensorFlow 模型。根据这篇文章“TensorFlow 库可以作为常规 Python 库安装在 Spark 集群上”。

此外,我刚刚找到了SparkFlow模块,它应该是用来连接 Spark 和 TensorFlow 的。GitHub 存储库在这里