默認地圖減少工作？多少映射器和減壓器

Question

我的問題是有多少默認映射器和減速器的工作，一個老闆問我，我說默認映射器4，和減速1，什麼是Sqoop默認映射器

Answer 1

Sqoop運行4名映射器在默認情況下並可以用-m或--num-mappers標誌覆蓋。

如果要導入的表不包含主鍵或在sqoop命令中沒有設置--split-by選項，那麼它必須是單個映射任務。顯式設置-m 1或--autoreset-to-one-mapper只運行一個地圖任務。

注意： Sqoop運行Map only作業（沒有reducer）。

在典型的MapReduce工作，映射器將取決於輸入（與他們的FileFormat）的數量和減速器默認爲1

數目對於Distcp工作崗位，地圖任務的數量將等於文件的數量。