《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 可編程邏輯 > 業(yè)界動態(tài) > IBM全新人工智能芯片解讀

IBM全新人工智能芯片解讀

2018-10-30
關(guān)鍵詞: 深度學習 芯片

微信圖片_20181029225147.jpg

深度學習領(lǐng)域仍在不斷變化,專家們認識到,如果芯片采用低精度數(shù)學方法來估算結(jié)果,那么神經(jīng)網(wǎng)絡(luò)可以用最少的能量實現(xiàn)最大化計算。這在移動設(shè)備和其他功率受限設(shè)備中特別適用。但是有些任務(wù),如訓練神經(jīng)網(wǎng)絡(luò),仍然需要高精度。IBM最近在IEEE的超大規(guī)模集成電路(VLSI)研討會上展示了一個原型芯片,它在兩個方面的表現(xiàn)都非常出色。

人工神經(jīng)網(wǎng)絡(luò)訓練和網(wǎng)絡(luò)功能執(zhí)行(稱為推理)之間的需求脫節(jié),一直是設(shè)計加速人工智能功能芯片的難點所在。IBM的新型加速人工智能芯片能夠?qū)崿F(xiàn)該公司所稱的“比例精度”。也就是說,它可以在32位、16位甚至1位或2位上進行訓練和推理。

凱拉什?古帕拉克里什南(Kailash Gopalakrishnan)是IBM位于紐約州約克鎮(zhèn)高地研究中心的項目負責人,他解釋說:“你可做的最高精度訓練為16位,而可做的最先進的推理是2位。該芯片涵蓋了迄今已知的最佳訓練和最佳推理?!?/p>

該芯片的這種能力源于兩項創(chuàng)新,創(chuàng)新的目標是保持所有處理器部件都保有數(shù)據(jù)并且都在運行。

古帕拉克里什南說道:“傳統(tǒng)(芯片)結(jié)構(gòu)的問題之一是執(zhí)行深度學習的利用率非常低。”即使芯片具有非常高的峰值性能,通常也只能利用20%到30%的資源來解決問題。而IBM的目標是始終保持在90%,且針對所有任務(wù)。

利用率低通常是由于芯片周圍的數(shù)據(jù)流存在瓶頸。古帕拉克里什南的團隊提出一個新數(shù)據(jù)流系統(tǒng),可加速從一個處理引擎到下一個處理引擎的數(shù)據(jù)傳輸,可根據(jù)處理學習還是推理任務(wù)以及不同的精度來進行設(shè)置。

第二個創(chuàng)新是使用一種專門設(shè)計的“高速暫存”芯片存儲。CPU或GPU上的傳統(tǒng)緩存遵循通用計算所適用的某些規(guī)則,但會導致深度學習的延遲。例如,在某些情況下,緩存將一個數(shù)據(jù)塊推送到計算機主存,如果神經(jīng)網(wǎng)絡(luò)推理或?qū)W習過程還需要這些數(shù)據(jù),系統(tǒng)就必須等待數(shù)據(jù)被重新取回。

高速暫存區(qū)能夠保持數(shù)據(jù)流經(jīng)芯片的處理引擎,確保數(shù)據(jù)在恰當?shù)臅r間處于正確的位置。

由此產(chǎn)生的芯片可以執(zhí)行人工智能深度學習的3種主要方式——卷積神經(jīng)網(wǎng)絡(luò)(CNN)、多層感知器(MLP)和長短期記憶(LSTM)。這些技術(shù)在語音、視覺和自然語言處理方面占據(jù)重要地位。在典型訓練精度16位的情況下,IBM的新型芯片每秒鐘可進行1.5萬億次浮點運算;在推理最佳精度2位的情況下,每秒可進行12萬億次。

古帕拉克里什南指出,由于芯片是采用先進的硅互補金屬氧化物半導體(CMOS)工藝(格羅方德公司的14納米工藝)制造的,因此所有運算都聚集在一個相當小的區(qū)域內(nèi)。這很重要,因為正如他所說:“在很多應(yīng)用中,成本受到尺寸的限制?!?/p>

隨著越來越多的初創(chuàng)公司涌現(xiàn),大公司也不斷推出新創(chuàng)意,IBM當然是這個是日益龐大的群體中的一員。盡管各家公司特點顯著,但也有許多共同之處。深度學習初創(chuàng)公司Mythic的首席技術(shù)官戴夫?菲克(Dave Fick)表示:“這些解決方案是根據(jù)具體問題而提出的?!彼浴懊總€人都在尋求相似的解決方案”是有道理的。本刊采訪了Mythic和其他初創(chuàng)公司,它們的目標都是在2019年讓客戶真正滿意。

至于這項技術(shù)何時可能在IBM沃森上或以其他形式進行商業(yè)化,目前還沒有任何消息,但IBM的半導體研究副總裁穆克?什哈雷(Mukesh Khare)認為它能夠發(fā)展和改進。他說:“這只是冰山一角?!?/p>


本站內(nèi)容除特別聲明的原創(chuàng)文章之外,轉(zhuǎn)載內(nèi)容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點。轉(zhuǎn)載的所有的文章、圖片、音/視頻文件等資料的版權(quán)歸版權(quán)所有權(quán)人所有。本站采用的非本站原創(chuàng)文章及圖片等內(nèi)容無法一一聯(lián)系確認版權(quán)者。如涉及作品內(nèi)容、版權(quán)和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經(jīng)濟損失。聯(lián)系電話:010-82306118;郵箱:aet@chinaaet.com。