據(jù)外媒報(bào)道,當(dāng)?shù)貢r(shí)間9月26日,瑞薩電子公司(Renesas Electronics Corporation)宣布與StradVision公司合作,聯(lián)合研發(fā)一個(gè)基于深度學(xué)習(xí)的目標(biāo)識(shí)別解決方案,用于下一代高級(jí)駕駛輔助系統(tǒng)(ADAS)的智能攝像頭,適用于L2及以上的ADAS。瑞薩電子是先進(jìn)半導(dǎo)體解決方案的主要供應(yīng)商,而StradVision是為自動(dòng)駕駛汽車(chē)提供視覺(jué)處理技術(shù)解決方案的供應(yīng)商,而且該公司具備深度學(xué)習(xí)專(zhuān)業(yè)知識(shí)。
?。▓D片來(lái)源:瑞薩電子)
為了避免在城市環(huán)境中遇到危險(xiǎn),下一代ADAS需要具備高精度的目標(biāo)識(shí)別功能,能夠探測(cè)行人和騎行人等弱勢(shì)道路使用者(VRU)。與此同時(shí),對(duì)于大眾市場(chǎng)中的中檔至入門(mén)級(jí)車(chē)型來(lái)說(shuō),此類(lèi)系統(tǒng)必須只消耗非常低的電力。而瑞薩和StradVision合作的新解決方案就可以實(shí)現(xiàn)上述兩個(gè)目標(biāo),從而加速ADAS的廣泛采用。
StradVision的深度學(xué)習(xí)目標(biāo)識(shí)別軟件在識(shí)別車(chē)輛、行人和車(chē)道標(biāo)記方面具備很高的性能,而且該款高精度識(shí)別軟件特別針對(duì)瑞薩的R-Car汽車(chē)片上系統(tǒng)(SoC)產(chǎn)品R-Car V3H和R-Car V3M進(jìn)行了優(yōu)化,上述兩款產(chǎn)品在量產(chǎn)中的口碑很好。而且此類(lèi)R-Car設(shè)備還集成了一個(gè)用于深度學(xué)習(xí)處理的專(zhuān)用引擎 - CNN-IP(卷積神經(jīng)網(wǎng)絡(luò)知識(shí)產(chǎn)權(quán)),使其能夠以最低的功耗高速運(yùn)行StradVision的SVNet汽車(chē)深度神經(jīng)網(wǎng)絡(luò)。此次合作產(chǎn)生的目標(biāo)識(shí)別解決方案能夠在保持低功耗的同時(shí),實(shí)現(xiàn)基于深度學(xué)習(xí)的目標(biāo)識(shí)別功能,適用于量產(chǎn)車(chē),能夠促進(jìn)ADAS的普及。
基于深度學(xué)習(xí)的目標(biāo)識(shí)別解決方案具備以下關(guān)鍵特性:
?。?)該解決方案能夠同時(shí)支持早期評(píng)估及量產(chǎn)車(chē)型
StradVision的SVNet深度學(xué)習(xí)軟件是一個(gè)強(qiáng)大的AI感知解決方案,能夠用于量產(chǎn)的ADAS系統(tǒng)。該軟件能夠在低光照的環(huán)境中實(shí)現(xiàn)高精度識(shí)別功能,而且在其他物體遮擋了被識(shí)別物體的部分時(shí),能夠處理此種遮擋情況,因而其一直受到贊賞。R-Car V3H的基本軟件包能夠?qū)崿F(xiàn)同時(shí)識(shí)別車(chē)輛、人和車(chē)道的功能,而且能夠以每秒25幀的速度處理圖像數(shù)據(jù),從而實(shí)現(xiàn)快速評(píng)估和POC開(kāi)發(fā)。如果研發(fā)人員希望通過(guò)添加標(biāo)識(shí)、標(biāo)記和其他物體作為識(shí)別目標(biāo),以定制軟件,可以采用上述功能作為基礎(chǔ),而且StradVision也提供了基于深度學(xué)習(xí)的目標(biāo)識(shí)別軟件,涵蓋了訓(xùn)練神經(jīng)網(wǎng)絡(luò),并將軟件嵌入至量產(chǎn)車(chē)中的所有步驟。
?。?)R-Car V3H和R-Car V3M片上系統(tǒng)在降低成本的同時(shí),提升了智能攝像頭系統(tǒng)的可靠性
除了CNN-IP專(zhuān)用深度學(xué)習(xí)模塊之外,瑞賽R-Car V3H和R-Car V3M還配備了IMP-X5圖像識(shí)別引擎。結(jié)合基于深度學(xué)習(xí)的復(fù)雜目標(biāo)識(shí)別與高度可驗(yàn)證的圖像識(shí)別處理以及人工制定的規(guī)則,設(shè)計(jì)人員得以打造一個(gè)強(qiáng)大的系統(tǒng)。此外,方案還設(shè)計(jì)了片上圖像信號(hào)處理器(ISP),對(duì)傳感器信號(hào)進(jìn)行轉(zhuǎn)換,用于圖像渲染和識(shí)別處理,這使得在沒(méi)有內(nèi)置ISP的情況下,就可以采用便宜的攝像頭來(lái)配置系統(tǒng),從而降低了總體材料(BOM)成本。
供貨信息
瑞薩的R-Car片上系統(tǒng)采用了最新聯(lián)合研發(fā)的深度學(xué)習(xí)解決方案,包括StradVision提供的軟件以及研發(fā)支持,將于2020年初向開(kāi)發(fā)人員供貨。