基于動(dòng)態(tài)均衡技術(shù)的海量異構(gòu)數(shù)據(jù)高并發(fā)可靠接入方法
所屬分類:技術(shù)論文
上傳者:wwei
文檔大?。?span>2949 K
標(biāo)簽: 海量異構(gòu)數(shù)據(jù) 高并發(fā) 動(dòng)態(tài)負(fù)載均衡策略
所需積分:0分積分不夠怎么辦?
文檔介紹:隨著大數(shù)據(jù)時(shí)代的到來,海量異構(gòu)數(shù)據(jù)的高并發(fā)可靠接入成為了一個(gè)亟待解決的問題。提出了一種基于動(dòng)態(tài)均衡技術(shù)的海量異構(gòu)數(shù)據(jù)高并發(fā)可靠接入方法。該方法采用去中心化的任務(wù)分配機(jī)制實(shí)現(xiàn)海量數(shù)據(jù)源接入;針對(duì)各類異構(gòu)數(shù)據(jù)源設(shè)計(jì)了基于HTTPS、SFTP、Kafka等多樣化采集手段及相應(yīng)的節(jié)點(diǎn)分配和回收機(jī)制;采用動(dòng)態(tài)負(fù)載均衡策略對(duì)采集資源進(jìn)行實(shí)時(shí)調(diào)整,以適應(yīng)不斷變化的數(shù)據(jù)負(fù)載,實(shí)現(xiàn)高并發(fā)處理。該研究為實(shí)現(xiàn)海量異構(gòu)數(shù)據(jù)的高效、可靠接入提供了一種有效的解決方法。
現(xiàn)在下載
VIP會(huì)員,AET專家下載不扣分;重復(fù)下載不扣分,本人上傳資源不扣分。