網(wǎng)絡(luò)邊緣計(jì)算革命蓄勢(shì)待發(fā)，不過，只有具備AI系統(tǒng)專長(zhǎng)的開發(fā)人員方可駕輕就熟。隨著用戶尋求更高級(jí)別的智能，對(duì)于靠近IoT(物聯(lián)網(wǎng))數(shù)據(jù)源的低功耗推理的需求將與日俱增。這些傳感器端尤其是超低功耗的傳感器端如何實(shí)現(xiàn)人工智能?

近日，萊迪思半導(dǎo)體公司推出了超低功耗 Lattice SensAI。公司亞太區(qū)資深事業(yè)發(fā)展經(jīng)理陳英仁先生稱其低功耗FPGA將與MCU(微控制器)競(jìng)爭(zhēng)，主攻低功耗、對(duì)計(jì)算精度要求不是那么高、低成本、小尺寸的嵌入式AI市場(chǎng)。

哪些場(chǎng)景需要傳感器“耍小聰明”?

如果說控制是rule driven(規(guī)則驅(qū)動(dòng))，那么AI是data driven(數(shù)據(jù)驅(qū)動(dòng))的。眾所周知，AI主要做培訓(xùn)和推理。云端做培訓(xùn)較多，萊迪思定位的傳感器端AI只做推理，“這些毫瓦級(jí)功耗FPGA將為機(jī)器學(xué)習(xí)推理在大眾市場(chǎng)物聯(lián)網(wǎng)應(yīng)用中實(shí)現(xiàn)快速部署創(chuàng)造機(jī)遇?！本拖褡鰤鬯镜膸煾档氖种高\(yùn)動(dòng)，許多命令無需傳到大腦，就是有經(jīng)驗(yàn)的習(xí)慣動(dòng)作。同樣，有些推理無需傳到云端或用復(fù)雜的計(jì)算芯片，例如人在室內(nèi)靜止不動(dòng)，智能照明系統(tǒng)有可能沒有發(fā)現(xiàn)人而自動(dòng)關(guān)閉，如果有低功耗的人臉感知就不會(huì)發(fā)生這種事了。智能門鎖通常用紅外感測(cè)，人走近密碼小門打開，但狗或動(dòng)物走近，也會(huì)打開，人臉檢測(cè)能感測(cè)到人走近，密碼箱門才會(huì)打開。超市可以用人臉統(tǒng)計(jì)人流或識(shí)別性別，以推送廣告。再有，智能音箱通常是聯(lián)網(wǎng)的，有時(shí)為了隱私安全，也希望一些音樂存在音箱里，在線下就能控制和聽音樂。有時(shí)近似的聲音聽不了，例如它知道“你好”，有時(shí)叫“李浩”，也會(huì)有反應(yīng)，就要教給它一些小智慧。工廠中的馬達(dá)聲音異常，上傳到云端來不及，傳感器端就可立即做出應(yīng)急反應(yīng)。

Lattice sensAI是什么?

Lattice sensAI是一種結(jié)合模塊化硬件套件、神經(jīng)網(wǎng)絡(luò)IP核、軟件工具、參考設(shè)計(jì)和定制化設(shè)計(jì)服務(wù)的完整技術(shù)集合，旨在促進(jìn)機(jī)器學(xué)習(xí)推理的大眾市場(chǎng) IoT應(yīng)用。如下圖，sensAI的核心主要是倒數(shù)第二的“IP核”和第三行的“軟件工具”。

Lattice sensAI提供經(jīng)優(yōu)化的解決方案，具有超低功耗(低于 1 mW~1 W)、封裝尺寸小(5.5~100 mm2)、接口靈活(諸如MIPI? CSI-2、LVDS、GigE 等)和批量?jī)r(jià)格低(約 1-10 美元)等優(yōu)勢(shì)，可加速實(shí)現(xiàn)更接近數(shù)據(jù)源的網(wǎng)絡(luò)邊緣計(jì)算。

Lattice sensAI首次全面解決了對(duì)靈活、低成本、超低功耗的 AI 半導(dǎo)體解決方案的需求，這些方案可快速部署至各類新興市場(chǎng)和大眾市場(chǎng) IoT 應(yīng)用。如下圖，主要面對(duì)的競(jìng)爭(zhēng)是MCU。與MCU相比，Lattice sensAI的優(yōu)勢(shì)是靈活支持各類傳統(tǒng)接口，且功耗極低，只有毫瓦級(jí)。

適用于解決網(wǎng)絡(luò)邊緣的計(jì)算問題，Lattice sensAI包括：? 模塊化硬件平臺(tái)—— 基于 ECP5?器件的視頻接口平臺(tái)(VIP)，包括嵌入式視覺開發(fā)套件和基于 iCE40 UltraPlus?器件的移動(dòng)開發(fā)平臺(tái)(MDP);? IP核——卷積神經(jīng)網(wǎng)絡(luò)(CNN)加速器和二值神經(jīng)網(wǎng)絡(luò)(BNN)加速器;? 軟件工具——從 Caffe/TensorFlow到 FPGA的神經(jīng)網(wǎng)絡(luò)編譯器工具、Lattice Radiant? 設(shè)計(jì)軟件和 Lattice Diamond設(shè)計(jì)軟件;? 參考設(shè)計(jì)——人臉檢測(cè)、關(guān)鍵詞檢測(cè)、對(duì)象計(jì)數(shù)、面部跟蹤和速度標(biāo)志牌檢測(cè);? 設(shè)計(jì)服務(wù)——設(shè)計(jì)服務(wù)合作伙伴的生態(tài)系統(tǒng)為大眾市場(chǎng)應(yīng)用提供定制解決方案，包括智能家居、智慧城市和智能工廠。

小結(jié)

Lattice sensAI提供靈活、超低功耗、小尺寸和批量?jī)r(jià)格低的網(wǎng)絡(luò)邊緣優(yōu)化解決方案。萊迪思的超低功耗FPGA由廣泛的硬件平臺(tái)、軟IP、設(shè)計(jì)工具、參考設(shè)計(jì)和第三方專家提供支持，是傳感器端AI的可靠、快捷的途徑。