Hadoop中Partition深度解析-Hadoop-@大數(shù)據(jù)資訊
http://www.thebigdata.cn/Hadoop/13841.html
Partition主要作用就是將map的結(jié)果發(fā)送到相應(yīng)的reduce牢裳。這就對partition有兩個要求:
1)均衡負載惧所,盡量的將工作均勻的分配給不同的reduce亩鬼。
2)效率剃允,分配速度一定要快。
Hadoop中Partition深度解析-Hadoop-@大數(shù)據(jù)資訊
http://www.thebigdata.cn/Hadoop/13841.html
Partition主要作用就是將map的結(jié)果發(fā)送到相應(yīng)的reduce牢裳。這就對partition有兩個要求:
1)均衡負載惧所,盡量的將工作均勻的分配給不同的reduce亩鬼。
2)效率剃允,分配速度一定要快。