有没有适用于多节点集群部署的Apache Spark 2.0.0公共Docker镜像？

寻找Apache Spark 2.0.0 Docker镜像可以从任何公共的repo中获取，支持集群。

Answer 1

目前没有这样的形象。 在Docker中运行Spark是非常棘手的，因为它的networking行为：

• 它打开了很多的端口，一些决定dynamic（TorrentBroadcast）。
• 它想通告其主机名称，以便能够接收来自执行者的传入连接。

我找不到一个现成的图像，我放弃了解决上述问题。 我采用了在主机networking中运行Docker中的Spark应用程序的解决方法。