展望2018 AI芯片領(lǐng)域:眾多廠商追隨深度學(xué)習(xí)
高通公司下一代核心研發(fā)總監(jiān)Karam Chatha表示:“軟件總是在變化的,但是你需要盡早把硬件拿出來,因為它會影響軟件——這種關(guān)系總是存在的。目前,這家移動芯片廠商正在Snapdragon片上系統(tǒng)的DSP和GPU內(nèi)核上運行神經(jīng)網(wǎng)絡(luò)工作,但一些觀察家預(yù)計,高通將為機(jī)器學(xué)習(xí)定制一個新的模塊,作為2019年的7納米Snapdragon SoC的一個組成部分。
高通公司展示了一個自定義深度神經(jīng)網(wǎng)絡(luò)加速器的研究范例,但是現(xiàn)在高通在通用的DSP和GPU核心上使用軟件。來源:高通
Patterson表示:“市場會決定哪些芯片最好。這是很殘酷的,但這正是設(shè)計計算的興奮點所在。”
早期的玩家已經(jīng)抓住了這個偶然的機(jī)會
例如,F(xiàn)acebook最近證明,通過大幅增加打包到所謂批量大小的功能數(shù)量,將訓(xùn)練時間從一天縮短到一個小時。對于試圖在本地SRAM中運行所有操作的Graphcore來說,這可能是個壞消息,因為這消除了外部DRAM訪問的延遲,同時也限制了內(nèi)存占用。
“他們是為小批量設(shè)計的,但幾個月前的軟件結(jié)果表明,你需要一個大批量。這說明了事情變的話的有多么快,”Patterson說。
另一方面,Rex Computing認(rèn)為他們正處于一個有利的位置。該初創(chuàng)公司的SoC最初是為高性能服務(wù)器設(shè)計的,使用了一種新穎的暫存器內(nèi)存。聯(lián)合創(chuàng)始人Thomas Sohmers說,Rex的方法消除了在虛擬頁面表中緩存數(shù)據(jù)的需求,這是GPU使用的一種技術(shù),增加了延遲。
因此他說,Rex芯片比現(xiàn)在的GPU要好得多,特別是在處理流行的矩陣/矢量運算神經(jīng)網(wǎng)絡(luò)時。Rex公司計劃6月份推出256核的SoC,預(yù)計能提供256Gflops/W。
與此同時,研究人員正在嘗試從32位到單浮點和整數(shù)數(shù)學(xué)的方方面面,以找到最有效的方法來計算神經(jīng)網(wǎng)絡(luò)結(jié)果。有一點似乎是他們認(rèn)同的,最好不要在精確度之間來回切換。
人工智能算法還處于初期階段
深度神經(jīng)網(wǎng)絡(luò)是幾十年來人工智能領(lǐng)域一直進(jìn)行的相對較小分支的工作。從2012年左右開始,包括Facebook公司的Yann LeCun在內(nèi)的很多研究人員開始使用特定種類的深度神經(jīng)網(wǎng)絡(luò)來識別圖像,并最終以比人類更高的準(zhǔn)確度得到令人驚嘆的結(jié)果。深度學(xué)習(xí)技術(shù)吸引了研究界,研究界迅速發(fā)表了不少該領(lǐng)域的論文,以尋求新的突破。
現(xiàn)在深度神經(jīng)網(wǎng)絡(luò)為Amazon Alexa、谷歌翻譯、Facebook面部識別等商用服務(wù)提供動力。網(wǎng)絡(luò)巨頭們和他們的全球競爭對手,正在尋找殺手級應(yīng)用的過程中競相將這些技術(shù)應(yīng)用于盡可能多的服務(wù)中。
責(zé)任編輯:任我行
-
碳中和戰(zhàn)略|趙英民副部長致辭全文
2020-10-19碳中和,碳排放,趙英民 -
兩部門:推廣不停電作業(yè)技術(shù) 減少停電時間和停電次數(shù)
2020-09-28獲得電力,供電可靠性,供電企業(yè) -
國家發(fā)改委、國家能源局:推廣不停電作業(yè)技術(shù) 減少停電時間和停電次數(shù)
2020-09-28獲得電力,供電可靠性,供電企業(yè)
-
碳中和戰(zhàn)略|趙英民副部長致辭全文
2020-10-19碳中和,碳排放,趙英民 -
深度報告 | 基于分類監(jiān)管與當(dāng)量協(xié)同的碳市場框架設(shè)計方案
2020-07-21碳市場,碳排放,碳交易 -
碳市場讓重慶能源轉(zhuǎn)型與經(jīng)濟(jì)發(fā)展并進(jìn)
2020-07-21碳市場,碳排放,重慶
-
兩部門:推廣不停電作業(yè)技術(shù) 減少停電時間和停電次數(shù)
2020-09-28獲得電力,供電可靠性,供電企業(yè) -
國家發(fā)改委、國家能源局:推廣不停電作業(yè)技術(shù) 減少停電時間和停電次數(shù)
2020-09-28獲得電力,供電可靠性,供電企業(yè) -
2020年二季度福建省統(tǒng)調(diào)燃煤電廠節(jié)能減排信息披露
2020-07-21火電環(huán)保,燃煤電廠,超低排放
-
四川“專線供電”身陷違法困境
2019-12-16專線供電 -
我國能源替代規(guī)范法律問題研究(上)
2019-10-31能源替代規(guī)范法律 -
區(qū)域鏈結(jié)構(gòu)對于數(shù)據(jù)中心有什么影響?這個影響是好是壞呢!