在Docker容器上使用Hadoop和Spark

我想爲我的工作使用Big Data Analytics。我已經實現了所有在容器中創建容器的docker東西。然而，我對大數據並不熟悉，並且我已經知道在速度很重要的時候，使用Hadoop for HDFS並在Hadoop上使用Spark而不是MapReduce本身是網站和應用程序的最佳方式。這將在我的Docker容器上工作嗎？如果有人能指引我去某處學習更多，這將非常有幫助。在Docker容器上使用Hadoop和Spark

來源

2016-06-15 deadcode

hadoop/spark中的Web應用程序？抱歉，但我不明白你的問題。也許你誤以爲apache spark bigdata（http://spark.apache.org/）和spark java web framework（http://sparkjava.com/）？ – angelcervera

對不起，但IMO這個問題到處都是，它涵蓋了多個主題，如分析/大數據（甚至是什麼），Docker，Hadoop/HDFS，Spark和MapReduce。當談到「這將在我的Docker容器上工作」時，我會說是的，大多數事情都可以在Docker上運行。 – NikoNyrh

您可以嘗試使用Cloudera QuickStart Docker Image來開始。請看https://hub.docker.com/r/cloudera/quickstart/。該Docker鏡像支持Cloudera的Hadoop平臺和Cloudera Manager的單節點部署。此Docker鏡像也支持spark。

來源

2016-06-21 17:08:15 janeshs

在Docker容器上使用Hadoop和Spark

回答

相關問題