如何使用斌/ Nutch的startserver的命令<em>本地</em>對的起它的分佈式環境

Question

運行Nutch的服務器我已經在服務器模式下測試的Nutch的運行。現在我想知道是否可以在hadoop集羣（在分佈式環境中）的服務器模式上啓動nutch，並使用nutch REST API向服務器提交爬網請求？ 請幫忙。

Answer 1

從進一步的研究中我已經得到了分佈式模式下的nutch服務器。

步驟： -

1. 假設Hadoop是在所有從節點構成。然後在所有節點中設置nutch。這可以幫助：http://wiki.apache.org/nutch/NutchHadoopTutorial
2. 在您的NameNode，cd $NUTCH_HOME/runtime/deploy
3. bin/nutch startserver -port <port> -host <host> 注：端口和主機都是可選的。
4. 然後，您可以使用REST從nutch提交請求。您提交的請求將由步驟3開始的nutch服務器接受。

快樂爬行:)