《電子技術(shù)應用》
您所在的位置:首頁 > 通信與網(wǎng)絡 > 業(yè)界動態(tài) > 2021大數(shù)據(jù)5大趨勢,值得關(guān)注!

2021大數(shù)據(jù)5大趨勢,值得關(guān)注!

2021-01-06
來源: 云科技時代

640.webp.jpg

  自2014年“大數(shù)據(jù)”首次進入政府工作報告,中國市場就開始了一場大數(shù)據(jù)的“淘數(shù)”熱。2015年開始的中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(簡稱:數(shù)博會)到2020年新冠疫情期間的“永不落幕的數(shù)博會”,經(jīng)過歷時5年6屆數(shù)博會的洗禮,已經(jīng)把“大數(shù)據(jù)”的觀念推廣到街頭巷尾。而在過去的5年間,中國的大數(shù)據(jù)技術(shù)產(chǎn)業(yè)也已經(jīng)蓬勃而起,形成了強有力的技術(shù)支撐體系——根據(jù)中國信通院,截止2020年10月我國活躍大數(shù)據(jù)企業(yè)超過3000余家。

  經(jīng)過5年的發(fā)展,如今“大數(shù)據(jù)”已經(jīng)走單純的技術(shù)架構(gòu)和技術(shù)體系,走向了社會基礎設施。2020年“新基建”就將“大數(shù)據(jù)中心”定義為數(shù)字新基礎設施的重要建設內(nèi)容。2020年底,上海市發(fā)布了《關(guān)于全面推進上海城市數(shù)字化轉(zhuǎn)型的意見》,鮮明提出要“再造數(shù)字時代的社會運轉(zhuǎn)流程”,特別是引導企業(yè)實現(xiàn)基于數(shù)據(jù)的“決策革命”,引導市場重塑數(shù)字時代的認知能力與思維模式,推動政府以數(shù)據(jù)驅(qū)動流程再造。

  然而,根據(jù)中國信通院的《大數(shù)據(jù)白皮書(2020)》:企業(yè)運營中的數(shù)據(jù)只有56%能夠被及時捕獲,而這其中僅有57%的數(shù)據(jù)得到了利用、43%的采集數(shù)據(jù)并沒有被激活,也就是說僅有32%的企業(yè)數(shù)據(jù)價值能夠被激活。雖然未來兩年,企業(yè)數(shù)據(jù)將以42.2%的速度保持高速增長,但如何激活數(shù)據(jù)價值、真正從大數(shù)據(jù)中“淘金”,成為2021年大數(shù)據(jù)的重中之重。

  數(shù)據(jù)融合與數(shù)據(jù)價值挖掘

  數(shù)據(jù)融合對于數(shù)據(jù)價值挖掘來說,具有重要的意義。中國工程院院士鄔賀銓在“永不落幕的數(shù)博會”2020系列活動——“大數(shù)據(jù)產(chǎn)業(yè)生態(tài)創(chuàng)新發(fā)展高峰會”上表示,數(shù)據(jù)融合利用需要標準規(guī)范先行,實現(xiàn)數(shù)據(jù)可見性、數(shù)據(jù)易理解性、數(shù)據(jù)可鏈接性、數(shù)據(jù)可信性、數(shù)據(jù)互操作性、數(shù)據(jù)安全性。同時,數(shù)據(jù)的融合利用面臨著建立數(shù)學模型的挑戰(zhàn),大數(shù)據(jù)挖掘面臨算力與算法、數(shù)據(jù)樣本準確性、小數(shù)據(jù)、人與數(shù)據(jù)融合的挑戰(zhàn)。

  鄔賀銓認為,在智慧城市管理與工業(yè)互聯(lián)網(wǎng)中有很多需要數(shù)據(jù)融合應用的場景,多元異構(gòu)的數(shù)據(jù)融合將盤活數(shù)據(jù),通過數(shù)據(jù)挖掘開發(fā)數(shù)據(jù)價值,發(fā)揮數(shù)據(jù)作為生產(chǎn)要素的作用。數(shù)據(jù)挖掘和AI分析需要面對海量處理能力、云邊端協(xié)同、建模、小數(shù)據(jù)、人與數(shù)據(jù)融合、數(shù)據(jù)自身安全、隱私與商密保護等的挑戰(zhàn),需要從基礎理論與工程實踐多方面研究數(shù)據(jù)要素價值挖掘的問題,開發(fā)出更多的大數(shù)據(jù)和AI分析技術(shù)。

  在跨企業(yè)數(shù)據(jù)融合時,還要保證數(shù)據(jù)能共享但敏感數(shù)據(jù)不外泄,需要建立新的數(shù)據(jù)隔空分析機制,以虛擬的黑箱使得數(shù)據(jù)既不脫離所在單位的管理又能被授權(quán)的其他單位調(diào)用,現(xiàn)有基于黑盒子的可信計算環(huán)境方式,但仍需證明第三方的可靠性。

  在創(chuàng)新數(shù)據(jù)流通技術(shù)手段方面,聯(lián)邦學習是一種重要的機器學習框架。聯(lián)邦學習是針對“數(shù)據(jù)孤島”和數(shù)據(jù)共享中的隱私安全問題而提出的機器學習框架,傳統(tǒng)的方式是需要將數(shù)據(jù)硬拷貝移動到授信的第三方,而聯(lián)邦學習則希望達到各個企業(yè)和機構(gòu)的自有數(shù)據(jù)不出本地,通過加密機制下的參數(shù)交換方式,建立一個虛擬的共有模型,數(shù)據(jù)本身不移動也不泄露隱私或影響數(shù)據(jù)合規(guī)。

  數(shù)據(jù)敏捷型經(jīng)濟體

  世界各國都在加強發(fā)展大數(shù)據(jù),推出國家級數(shù)據(jù)戰(zhàn)略,探索數(shù)據(jù)發(fā)展之路。其中,歐盟的數(shù)據(jù)戰(zhàn)略極具體代表性。由于歐盟是由20余個國家所組成的經(jīng)濟聯(lián)合體,歐盟所制訂的各類政策對于其它單一國家或經(jīng)濟體來說,更前瞻性考慮到不同市場、國家和區(qū)域之間的協(xié)同、平衡和包容性,也更具有代表意義。

  根據(jù)中國信通院《大數(shù)據(jù)白皮書(2020)》,歐盟為了應對未來發(fā)展而致力于平衡數(shù)據(jù)流動與廣泛使用,希望通過建立單一的數(shù)據(jù)市場,確保歐洲在未來的數(shù)據(jù)經(jīng)濟中占據(jù)領先地位。2020年2月,歐盟委員會公布了《歐盟數(shù)據(jù)戰(zhàn)略》,對歐盟數(shù)據(jù)發(fā)展提出了明確的愿景目標——2030年歐洲將成為世界上最具吸引力、最安全、最具活力的數(shù)據(jù)敏捷型經(jīng)濟體。即在保持高度的隱私、安全和道德標準的前提下,充分發(fā)掘數(shù)據(jù)利用的價值造福經(jīng)濟社會,并確保每個人能從數(shù)據(jù)紅利中受益。

  2020年5月,赫爾辛基歐盟辦公室成員組織(Helsinki EU Office members)聯(lián)合發(fā)布了《數(shù)據(jù)敏捷型經(jīng)濟:從被動到主動式,更好的服務社會》白皮書2.0版本,建議了從被動利用數(shù)據(jù)向主動利用數(shù)據(jù)而轉(zhuǎn)型的立法框架:創(chuàng)新型跨部門利用數(shù)據(jù),從而在更高效、主動和個性化公共服務中起到主要作用;不同生態(tài)伙伴之間的緊密合作,包括公共機構(gòu)、RDI組織、私營企業(yè)和NGO非營利性機構(gòu),對釋放數(shù)字化轉(zhuǎn)型潛力起到關(guān)鍵作用;讓每個人都可以按自己的方式使用和利用個人數(shù)據(jù),從而為個人帶來收益以及為社會貢獻;通過更好的數(shù)據(jù)管理和更高水平的數(shù)據(jù)文化及數(shù)字技能,實現(xiàn)數(shù)據(jù)信任和民眾的賦能。

  知識圖譜與決策智能

  隨著大數(shù)據(jù)的發(fā)展,企業(yè)和公共機構(gòu)越來越需要將不同的數(shù)據(jù)進行有效鏈接,從而形成新的動態(tài)知識,以輔助企業(yè)和公共機構(gòu)的決策。這就需要運用圖數(shù)據(jù)庫、圖計算引擎和知識圖譜,其中知識圖譜是圖數(shù)據(jù)庫和圖計算引擎的重要應用場景。根據(jù)DB-Engines排名分析,圖數(shù)據(jù)庫關(guān)注熱度在2013年到2020年間增長了10倍,關(guān)注度增長排名第一,遠遠高于其它數(shù)據(jù)庫或數(shù)據(jù)引擎。用戶畫像和信用檔案等,是知識圖譜的新應用場景。

  滿幫集團是一家崛起于貴州的大數(shù)據(jù)獨角獸企業(yè)。滿幫是一家公路物流領域的智能運力平臺,連接貨車司機及貨主雙端用戶,通過大數(shù)據(jù)的智能推薦幫助雙方快速完成運輸交易,提高運輸效率,減少交易成本,降低貨車空駛率。2020年11月底,繼2018年19億美元融資后,滿幫宣布完成約17億美元新一輪融資。截至2020年11月,滿幫平臺認證司機超過1000萬,認證貨主超過500萬。

  物流行業(yè)是一個信用體系并不很健全的行業(yè),此前每成交四個交易就會發(fā)生一起糾紛,糾紛成本非常高。滿幫建立了一個梵高系統(tǒng),為每一個用戶、司機、貨主都建立了信用檔案畫像,囊括了200多個維度的指標,同時建立失信黑名單,與國家發(fā)改委和國家信息中心“信用中國”系統(tǒng)聯(lián)通,實施聯(lián)合懲戒,還被納入央行征信系統(tǒng),為卡車司機打造“第二張身份證”,將行業(yè)糾紛率由25%下降到3%。

  目前,國內(nèi)的阿里云、華為、騰訊、百度等大型云廠商以及一些初創(chuàng)企業(yè)都在布局圖數(shù)據(jù)庫、圖計算引擎和知識圖譜,特別是知識圖譜已經(jīng)開始深入應用到金融、工業(yè)、能源等多個行業(yè)和領域。知識圖譜正在成為企業(yè)決策的重要技術(shù)平臺與工具。

  產(chǎn)業(yè)物聯(lián)網(wǎng)提速

  物聯(lián)網(wǎng)是大數(shù)據(jù)的一個重要來源。傳統(tǒng)觀念認為消費物聯(lián)網(wǎng)是物聯(lián)網(wǎng)大數(shù)據(jù)的主要來源,但隨著產(chǎn)業(yè)物聯(lián)網(wǎng)的飛速發(fā)展,產(chǎn)業(yè)物聯(lián)網(wǎng)正在超越消費物聯(lián)網(wǎng)而成為物聯(lián)網(wǎng)大數(shù)據(jù)的主要來源。根據(jù)中國信通院《物聯(lián)網(wǎng)白皮書(2020)》,隨著物聯(lián)網(wǎng)加速向各行業(yè)滲透,行業(yè)的信息化和聯(lián)網(wǎng)水平不斷提升,產(chǎn)業(yè)物聯(lián)網(wǎng)連接數(shù)占比將提速。

  據(jù)GSMA Intelligence預測,產(chǎn)業(yè)物聯(lián)網(wǎng)設備的聯(lián)網(wǎng)數(shù)將在2024年超過消費物聯(lián)網(wǎng)的設備數(shù)。在中國,2019年中國物聯(lián)網(wǎng)連接數(shù)中,產(chǎn)業(yè)物聯(lián)網(wǎng)與消費者市場各占一半,預計到2025年中國物聯(lián)網(wǎng)連接數(shù)的大部分增長來自產(chǎn)業(yè)市場,產(chǎn)業(yè)物聯(lián)網(wǎng)的連接數(shù)將占到總體的61.2%。智慧工業(yè)、智慧交通、智慧健康、智慧能源等領域,將最有可能成為產(chǎn)業(yè)物聯(lián)網(wǎng)連接數(shù)增長最快的領域。

  產(chǎn)業(yè)物聯(lián)網(wǎng)的大數(shù)據(jù)處理涉及到邊緣計算。市場調(diào)研機構(gòu)IDC預測,未來超過50%的數(shù)據(jù)需要在邊緣側(cè)進行存儲、分析、計算,到2024年全球邊緣計算市場將達到2506億美元。在中國市場,2020新基建中的5G、AI、智慧交通、新能源汽車充電樁、工業(yè)互聯(lián)網(wǎng)等都是與邊緣計算相關(guān)的技術(shù)或場景。

  根據(jù)2020年12月由邊緣計算產(chǎn)業(yè)聯(lián)盟(ECC)與工業(yè)互聯(lián)網(wǎng)產(chǎn)業(yè)聯(lián)盟(AII)聯(lián)合發(fā)布的《邊緣計算與云計算協(xié)同白皮書2.0》,運用AI技術(shù)進行邊緣數(shù)據(jù)處理正在面臨挑戰(zhàn):AR、VR、互動直播、視頻監(jiān)控等場景下非結(jié)構(gòu)化數(shù)據(jù)為主,挑戰(zhàn)在于數(shù)據(jù)量大、資源用量大、實時要求高、數(shù)據(jù)標注困難等;工業(yè)場景下IoT結(jié)構(gòu)化數(shù)據(jù)為主,挑戰(zhàn)在于樣本少、冷啟動和要求模型可解釋和可靠性。邊云協(xié)同AI框架的關(guān)鍵技術(shù)包括:增量學習、聯(lián)邦學習、聯(lián)合推理等。

  數(shù)據(jù)安全熱度持續(xù)上升

  數(shù)據(jù)共享與流通是釋放數(shù)據(jù)價值的重要方向。中國工程院院士沈昌祥在“永不落幕的數(shù)博會”2020系列活動——“大數(shù)據(jù)產(chǎn)業(yè)生態(tài)創(chuàng)新發(fā)展高峰會”上作了《用主動免疫可信計算保障數(shù)字經(jīng)濟高質(zhì)健康發(fā)展》主題演講。他表示,數(shù)據(jù)“科學”發(fā)展經(jīng)歷了數(shù)值計算、數(shù)據(jù)工程、數(shù)字社會的過程。網(wǎng)絡空間已經(jīng)成為繼陸、海、空、天之后的第五大主權(quán)領域空間,沒有網(wǎng)絡安全就沒有國家安全。

  大數(shù)據(jù)、數(shù)字經(jīng)濟要通過相應的法律制度以及相關(guān)措施來保障健康發(fā)展。一是改變計算方式,邊計算邊保護;二是構(gòu)建免疫系統(tǒng),改變安全體系結(jié)構(gòu);三是網(wǎng)絡系統(tǒng)安全要構(gòu)建“安全辦公室”“警衛(wèi)室”“安全快遞”這“三重”防護框架;四是對人的操作訪問策略四要素(主體、客體、操作、環(huán)境)進行動態(tài)可信度量、識別和控制;五是對“風險分析、準確定級”“評審備案、規(guī)范建設”“感知預警、應急反制”“嚴格測評、整頓完善”等環(huán)節(jié)進行全程管控,技管并重;六是達到非授權(quán)者重要信息拿不到、系統(tǒng)和信息改不了、攻擊行為賴不掉、攻擊者進不去、竊取保密信息看不懂、系統(tǒng)工作癱不成等“六不”防護效果。

  中國信通院《大數(shù)據(jù)白皮書(2020)》還指出:基于隱私計算的數(shù)據(jù)流通技術(shù)成為實現(xiàn)數(shù)據(jù)聯(lián)合計算的主要思路。在數(shù)據(jù)合規(guī)流通需求旺盛的環(huán)境下,隱私計算技術(shù)發(fā)展火熱。隱私計算在保護數(shù)據(jù)本身不對外泄露的前提下,實現(xiàn)了數(shù)據(jù)融合,為安全合規(guī)的數(shù)據(jù)流通帶來了可能。

  總結(jié)而言:進入2021年,大數(shù)據(jù)已經(jīng)從單純的技術(shù)體系,向著與實體經(jīng)濟結(jié)合、真正挖掘和發(fā)揮數(shù)據(jù)價值的方向發(fā)展。特別是新冠疫情和新基建,加速了大數(shù)據(jù)與實體社會基礎設施的快速融合,而5G與物聯(lián)網(wǎng)等的快速發(fā)展也進一步加大了大數(shù)據(jù)與實體經(jīng)濟的深度融合。隨著數(shù)博會即將進入第6個年頭,大數(shù)據(jù)將真正深入到社會經(jīng)濟的方方面面,推進下一輪經(jīng)濟長周期。

 


本站內(nèi)容除特別聲明的原創(chuàng)文章之外,轉(zhuǎn)載內(nèi)容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點。轉(zhuǎn)載的所有的文章、圖片、音/視頻文件等資料的版權(quán)歸版權(quán)所有權(quán)人所有。本站采用的非本站原創(chuàng)文章及圖片等內(nèi)容無法一一聯(lián)系確認版權(quán)者。如涉及作品內(nèi)容、版權(quán)和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經(jīng)濟損失。聯(lián)系電話:010-82306118;郵箱:aet@chinaaet.com。