泛在電力物聯(lián)網(wǎng)廣泛應(yīng)用大數(shù)據(jù)、云計算、物聯(lián)網(wǎng)等信息技術(shù)和智能技術(shù),是數(shù)字革命在能源電力領(lǐng)域迅速發(fā)展的必然產(chǎn)物。人們的生活、工作、學(xué)習(xí)中到處都是海量數(shù)據(jù),無處不在的數(shù)據(jù)正發(fā)揮著巨大的能量,成為社會進(jìn)步的重要驅(qū)動力。更多的數(shù)據(jù)應(yīng)用和價值等待我們?nèi)ヌ剿鳌?/p>
北京時間4月10日晚,由全世界200多位科學(xué)家合作完成的重大天文學(xué)成果——人類首張黑洞照片,在全球多地同步發(fā)布。你知道嗎?這張黑洞照片是由天文望遠(yuǎn)鏡獲得的大數(shù)據(jù)合成而來。
分布在全球各地的許多天文望遠(yuǎn)鏡在同一時間“按下快門”,記錄無線電數(shù)據(jù)。天文望遠(yuǎn)鏡獲取的數(shù)據(jù)量非常大,一晚上就能收集到2PB(PB為十億兆級)。如此龐大的數(shù)據(jù)難以用網(wǎng)絡(luò)傳輸,必須裝到硬盤里,而這些儲存數(shù)據(jù)的硬盤足足有半噸重。之后,依靠機(jī)器學(xué)習(xí)算法,科學(xué)家們把數(shù)據(jù)拼到一起,構(gòu)建出黑洞圖像。
大數(shù)據(jù)時代
隨著移動互聯(lián)網(wǎng)和物聯(lián)網(wǎng)技術(shù)的發(fā)展,數(shù)據(jù)正在以超出人們想象的速度快速增長。根據(jù)國際數(shù)據(jù)公司(IDC)統(tǒng)計,2014年全球數(shù)據(jù)總量為8ZB(1ZB=1021B),預(yù)計2020年將達(dá)到44ZB。同期,我國數(shù)據(jù)總量為909EB(1EB=1018B,萬億兆級),占全球數(shù)據(jù)總量的13%;預(yù)計到2020年,我國數(shù)據(jù)量將達(dá)到8060EB,占全球數(shù)據(jù)總量的18%。毫無疑問,我們已身處大數(shù)據(jù)時代。
在小數(shù)據(jù)時代,受限于信息獲取和處理能力,只能隨機(jī)抽樣。而在大數(shù)據(jù)時代,信息獲取成本大大降低,信息獲取效率成倍提高,信息處理能力得到增強(qiáng),原先被忽略的細(xì)節(jié)更容易被察覺到,不必考慮抽樣的科學(xué)性,分析結(jié)果將更加準(zhǔn)確。大數(shù)據(jù)時代改變了認(rèn)識世界的方式,即尋找相關(guān)關(guān)系,而不是因果關(guān)系。大數(shù)據(jù)的相關(guān)關(guān)系分析法更準(zhǔn)確更迅速,而且不易受偏見影響。
大數(shù)據(jù)技術(shù)體系
廣義大數(shù)據(jù)技術(shù)體系包括:存儲層、整合層、計算層、應(yīng)用層,其中存儲層包括列數(shù)據(jù)庫、鍵值數(shù)據(jù)庫、內(nèi)存數(shù)據(jù)庫、分布式文件系統(tǒng),整合層包括流數(shù)據(jù)總線、大數(shù)據(jù)連接器、PIG、HIVE,計算層包括并行數(shù)據(jù)處理、流式計算,應(yīng)用層包括自然語言處理、圖像識別、數(shù)據(jù)挖掘等。
電力大數(shù)據(jù)
隨著智能電網(wǎng)和信息化建設(shè),電力行業(yè)已積累了海量數(shù)據(jù),在數(shù)據(jù)量、多樣性、速度和價值方面具有大數(shù)據(jù)的特征。電力行業(yè)已進(jìn)入大數(shù)據(jù)時代。電力大數(shù)據(jù)是通過傳感器、智能設(shè)備、視頻監(jiān)控設(shè)備、音頻通信設(shè)備、移動終端等各種數(shù)據(jù)采集渠道收集到的海量結(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化的業(yè)務(wù)數(shù)據(jù)集合。
電力大數(shù)據(jù)是電力公司的新型資產(chǎn),將為電力行業(yè)帶來顯著的價值和電力公司的核心競爭力;促進(jìn)業(yè)務(wù)管理向著更精細(xì)、更高效的方向發(fā)展。大數(shù)據(jù)技術(shù)將推動電力公司信息技術(shù)平臺的升級與改造,包括提升數(shù)據(jù)存儲和及時處理的能力;補(bǔ)充在非結(jié)構(gòu)化數(shù)據(jù)分析與利用的能力;增強(qiáng)對海量數(shù)據(jù)資源的價值挖掘能力。
青海新能源
大數(shù)據(jù)創(chuàng)新平臺
國網(wǎng)青海省電力公司以新能源為切入點,2018年1月,建成國內(nèi)首個數(shù)據(jù)匯集、存儲、服務(wù)、運(yùn)營一體的新能源大數(shù)據(jù)創(chuàng)新平臺。平臺的核心架構(gòu)包括3個層面。
核心平臺層是開展創(chuàng)新服務(wù)的基礎(chǔ)支撐;在網(wǎng)絡(luò)資源、計算資源等基礎(chǔ)設(shè)施服務(wù)的基礎(chǔ)上,提供以物聯(lián)網(wǎng)技術(shù)為核心的數(shù)據(jù)采集服務(wù)。在物聯(lián)接入部分,平臺的數(shù)據(jù)接入速率可以達(dá)到每秒3600條左右,累積接入數(shù)據(jù)已經(jīng)超過53億條,每日接入的數(shù)據(jù)量超過80GB。
服務(wù)層面,是創(chuàng)新平臺的基本業(yè)務(wù)形態(tài),基于開放的平臺支撐,提供平臺服務(wù)4個,應(yīng)用服務(wù)21個。
生態(tài)層面,以海量數(shù)據(jù)和平臺開放能力吸引更多的服務(wù)提供方。目前該平臺已經(jīng)聚集了來自全國不同地區(qū)的服務(wù)提供團(tuán)隊13個,接入新能源場站121座。
張玉天 博士,就職于中國電力科學(xué)研究院人工智能應(yīng)用研究所大數(shù)據(jù)應(yīng)用研究室,主要從事電力大數(shù)據(jù)相關(guān)研究,負(fù)責(zé)、參與多項國家電網(wǎng)有限公司科技項目、智慧能源小鎮(zhèn)示范工程等。
《亮報》:從現(xiàn)階段對大數(shù)據(jù)的挖掘和應(yīng)用階段來看,您認(rèn)為,電力大數(shù)據(jù)的利用處于什么階段?未來,電力大數(shù)據(jù)將會發(fā)揮哪些作用?
張玉天:國家電網(wǎng)有限公司于2014年開始加強(qiáng)大數(shù)據(jù)相關(guān)研究,目前已建成集中式和分布式混合架構(gòu)的企業(yè)級電力大數(shù)據(jù)平臺,在應(yīng)用方面重點推進(jìn)大數(shù)據(jù)在輸變電智能化、智能配用電、源網(wǎng)荷協(xié)調(diào)優(yōu)化、智能調(diào)度控制、企業(yè)經(jīng)營管理和信息通信6大領(lǐng)域的支撐作用。總體來說,電力大數(shù)據(jù)的利用已經(jīng)歷探索起步階段,擁有不錯的數(shù)據(jù)和應(yīng)用基礎(chǔ),正在伴隨泛在電力物聯(lián)網(wǎng)建設(shè)所帶來的信息全面感知與業(yè)務(wù)新需求而蓬勃發(fā)展。
未來,大數(shù)據(jù)將在電網(wǎng)規(guī)劃、投資建設(shè)、資產(chǎn)管理、公司運(yùn)營等方面,對電網(wǎng)發(fā)展方式與經(jīng)營模式的轉(zhuǎn)變起到重要支撐作用。實現(xiàn)數(shù)據(jù)支撐的公司經(jīng)營管理水平提升,用電客戶服務(wù)能力提升,并為政府提供客觀高效的數(shù)據(jù)服務(wù)。積極打造數(shù)據(jù)共享服務(wù)商業(yè)模式,加強(qiáng)對外提供數(shù)據(jù)服務(wù),開發(fā)數(shù)字產(chǎn)品,提供分析服務(wù),推動數(shù)據(jù)運(yùn)營。