基于Flink框架的TopN堆排序優(yōu)化算法
所屬分類：技術(shù)論文
上傳者：zhoubin333
文檔大?。?span>1914 K
標(biāo)簽： 大數(shù)據(jù) TopN Flink
所需積分：0分積分不夠怎么辦？
文檔介紹：為了解決大數(shù)據(jù)TopN排序問題，將傳統(tǒng)的堆排序進(jìn)行優(yōu)化，闡述了優(yōu)化后的HeapOptimize方法的處理過程。HeapOptimize方法基于Flink框架來完成TopN作業(yè)，可以實(shí)時(shí)地接收并處理大量的數(shù)據(jù)，根據(jù)單位時(shí)間需要處理的數(shù)據(jù)數(shù)量來調(diào)整算子的并行度，增加Flink框架的吞吐量，提高處理數(shù)據(jù)的速度。通過實(shí)驗(yàn)測量的數(shù)據(jù)結(jié)果佐證了HeapOptimize方法的優(yōu)勢。
現(xiàn)在下載
VIP會員，AET專家下載不扣分；重復(fù)下載不扣分，本人上傳資源不扣分。