Question

如何确定 Hadoop map和reduce的个数

Answer 1

hadoop的一大优势就是底层透明，所以你是不能用正常的方法选择特定的节点来运行的。hadoop会自动根据数据的分布来选择节点运行map。map和reduce不是1对1的，通常map数量远远超过reduce，reduce常常是每个节点上一个。