基于Flink框架的TopN堆排序优化算法
所属分类:技术论文
上传者:zhoubin333
文档大小:1914 K
标签: 大数据 TopN Flink
所需积分:0分积分不够怎么办?
文档介绍:为了解决大数据TopN排序问题,将传统的堆排序进行优化,阐述了优化后的HeapOptimize方法的处理过程。HeapOptimize方法基于Flink框架来完成TopN作业,可以实时地接收并处理大量的数据,根据单位时间需要处理的数据数量来调整算子的并行度,增加Flink框架的吞吐量,提高处理数据的速度。通过实验测量的数据结果佐证了HeapOptimize方法的优势。
现在下载
VIP会员,AET专家下载不扣分;重复下载不扣分,本人上传资源不扣分。