hadoop与spark的处理技巧(一)Top N处理技巧

1.MR的topN处理方案,假设所有输入Key都唯一

2.MR的topN处理方案,假设输入Key不唯一

3.spark的topN处理方案,假设所有输入Key都唯一,不使用top()和takeOrdered()函数

4.spark的topN处理方案,假设输入Key不唯一,不使用top()和takeOrdered()函数

5.spark的topN处理方案,假设输入Key不唯一,使用takeOrdered()函数

 

原文地址:https://www.cnblogs.com/gaohuajie/p/10096055.html