澳洲業(yè)者BrainChip宣布采用其棘波神經(jīng)處理器(spiking neural processor)技術(shù),開(kāi)發(fā)了自主性視覺(jué)特征提取(Autonomous Visual Feature Extraction,AVFE)系統(tǒng)。
BrainChip的神經(jīng)網(wǎng)路處理器被稱為SNAP,采用訊號(hào)棘波來(lái)傳輸資料,以及一種叫做棘波時(shí)機(jī)相關(guān)可塑性(Spike Time Dependent Plasticity,STDP)的學(xué)習(xí)方法。AVFE是一項(xiàng)突破,證明能從視覺(jué)資料流進(jìn)行無(wú)人監(jiān)督的學(xué)習(xí),可應(yīng)用于諸如自動(dòng)駕駛車輛與無(wú)人機(jī)的防碰撞功能。
根據(jù)BrainChip所提供的資料,SNAP上的AVFE每秒能處理100萬(wàn)個(gè)視覺(jué)事件,而且能在幾秒鐘學(xué)習(xí)并辨別資料流中的圖形;SNAP/AVFE是以該公司向瑞士開(kāi)發(fā)商Inilabs采購(gòu)的Davis 動(dòng)態(tài)視覺(jué)感測(cè)器(Dynamic Vision Sensor),做為串流數(shù)位視訊資料的來(lái)源。
Davis 動(dòng)態(tài)視覺(jué)感測(cè)器是一種人工視網(wǎng)膜,擁有與SNAP相同的位置事件表現(xiàn)(Address Event Representation,AER)介面;并非將視訊訊框輸出,每個(gè)畫(huà)素只要在對(duì)比(contrast)變化時(shí)就會(huì)輸出一個(gè)或更多棘波。
AVFE 系統(tǒng)架構(gòu)
執(zhí)行于SNAP上并連結(jié)至一個(gè)恰當(dāng)視訊來(lái)源的AVFE潛在應(yīng)用,包括車輛以及無(wú)人機(jī)內(nèi)的防碰撞系統(tǒng)、異常狀況檢測(cè)、保全與醫(yī)療成像等等。
該系統(tǒng)最初對(duì)于輸入資料流內(nèi)容并無(wú)所知,會(huì)藉由重復(fù)性與強(qiáng)度自主學(xué)習(xí),并開(kāi)始找到影像串流內(nèi)的圖形;影像串流可以是由視覺(jué)影像感測(cè)器(如Davis人工視網(wǎng)膜)所產(chǎn)生,或是經(jīng)過(guò)恰當(dāng)設(shè)計(jì)的雷達(dá)或超音波來(lái)源設(shè)備。
AVFE已經(jīng)在美國(guó)加州帕沙迪那(Pasadena)的高速公路上進(jìn)行過(guò)測(cè)試,持續(xù)運(yùn)作了78.5秒,SNAP棘波神經(jīng)網(wǎng)路學(xué)習(xí)辨別車輛并開(kāi)始即時(shí)計(jì)算其數(shù)量。
以Inilabs的Davis視網(wǎng)膜晶片擷取的視覺(jué)影像,顯示在高速公路上移動(dòng)的車流
BrainChip執(zhí)行長(zhǎng)、SNAP神經(jīng)處理器的發(fā)明人Peter van der Made表示:“我們對(duì)于此大幅度進(jìn)展感到非常興奮,展現(xiàn)了BrainChips的神經(jīng)處理器SNAP能在無(wú)人類監(jiān)督的情況下,從視覺(jué)饋入擷取資訊并學(xué)習(xí)?!?/p>