基于動態(tài)均衡技術的海量異構數(shù)據(jù)高并發(fā)可靠接入方法
所屬分類:技術論文
上傳者:wwei
文檔大?。?span>2949 K
標簽: 海量異構數(shù)據(jù) 高并發(fā) 動態(tài)負載均衡策略
所需積分:0分積分不夠怎么辦?
文檔介紹:隨著大數(shù)據(jù)時代的到來,海量異構數(shù)據(jù)的高并發(fā)可靠接入成為了一個亟待解決的問題。提出了一種基于動態(tài)均衡技術的海量異構數(shù)據(jù)高并發(fā)可靠接入方法。該方法采用去中心化的任務分配機制實現(xiàn)海量數(shù)據(jù)源接入;針對各類異構數(shù)據(jù)源設計了基于HTTPS、SFTP、Kafka等多樣化采集手段及相應的節(jié)點分配和回收機制;采用動態(tài)負載均衡策略對采集資源進行實時調(diào)整,以適應不斷變化的數(shù)據(jù)負載,實現(xiàn)高并發(fā)處理。該研究為實現(xiàn)海量異構數(shù)據(jù)的高效、可靠接入提供了一種有效的解決方法。
現(xiàn)在下載
VIP會員,AET專家下載不扣分;重復下載不扣分,本人上傳資源不扣分。