map reduce出错能知道是具体哪一行出错么
2个回答
展开全部
hadoop的一大优势就是底层透明,所以你是不能用正常的方法选择特定的节点来运行的。
hadoop会自动根据数据的分布来选择节点运行map。
map和reduce不是1对1的,通常map数量远远超过reduce,reduce常常是每个节点上一个。
并发编程 是一种计算机编程技术,可以让操作并行执行——在单计算机或者跨越多台计算机上都可以实现,而在后一种情况下,使用术语分布式计算。(维基百科)
hadoop会自动根据数据的分布来选择节点运行map。
map和reduce不是1对1的,通常map数量远远超过reduce,reduce常常是每个节点上一个。
并发编程 是一种计算机编程技术,可以让操作并行执行——在单计算机或者跨越多台计算机上都可以实现,而在后一种情况下,使用术语分布式计算。(维基百科)
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
展开全部
Map-Reduce等于Hadoop,没有Hadoop谈Map-Reduce犹如自上谈兵,实则不然,Map-Reduce是一种计算模型,只是非常适合在并行的环境下运行,Hadoop是Map-Reduce的一种实现,没有Hadoop照样可以跑Map-Reduce程序。
python就内置有map()和reduce方法(虽然与hadoop的map-reduce有区别)。
以免病菌产生抗药性[] 虫害马铃薯的主要虫害是二十八星瓢
python就内置有map()和reduce方法(虽然与hadoop的map-reduce有区别)。
以免病菌产生抗药性[] 虫害马铃薯的主要虫害是二十八星瓢
已赞过
已踩过<
评论
收起
你对这个回答的评价是?
推荐律师服务:
若未解决您的问题,请您详细描述您的问题,通过百度律临进行免费专业咨询