97国产精品一区二区视频_国产午夜毛片色哟哟_惠民福利国产91精品看黄网站在线观看_搡老熟女老女人一区二区三区_国产做a∨在线视频观看免费_日韩 综合 婷婷 图_成人黄色一级毛片片_萧山本地第一网络媒体_亚洲国产精品无码久久久曰_亚洲欧美日韩岛国色图

快捷導航

網絡邊緣AI推理,Lattice低功耗FPGA的又一大用武之地

2024-12-4 09:22| 發(fā)布者: admin| 查看: 108| 評論: 0
摘要: 最近FPGA這個市場好不熱鬧,國內FPGA第一股安路科技登陸科創(chuàng)板,瑞薩宣布進軍FPGA。老大賽靈思和老二Altera已經相繼被收購,老三Lattice近年來憑借低功耗在FPGA市場闖出一番天地。過去四年來,Lattice的出貨量已達10 ...


最近FPGA這個市場好不熱鬧,國內FPGA第一股安路科技登陸科創(chuàng)板,瑞薩宣布進軍FPGA。老大賽靈思和老二Altera已經相繼被收購,老三Lattice近年來憑借低功耗在FPGA市場闖出一番天地。過去四年來,Lattice的出貨量已達10億顆,儼然成為了全球出貨量最大的FPGA廠商。

FPGA已經存在了幾十年,發(fā)展到現(xiàn)在,將FPGA用于AI是一大趨勢。FPGA在加速 AI 相關工作負載(尤其是推理)方面顯示出巨大潛力。使用 FPGA 加速機器學習和深度學習過程的主要優(yōu)勢是它們的靈活性、自定義并行性以及為多種目的重新編程的能力?,F(xiàn)在Lattice嗅到了邊緣計算AI推理的商機。

為什么選擇FPGA實現(xiàn)網絡邊緣AI?



目前,網絡邊緣的計算正在快速興起。有很多新的應用都在邊緣端發(fā)展出新的應用和使用場景。據ABI的研究調查表明,預計到2024年設備端的AI推理功能將覆蓋近60%的設備。Lattice看到了這其中的機會,正在將FPGA運用到邊緣計算AI推理中。

那為什么要選擇FPGA來實現(xiàn)網絡邊緣的AI呢?要知道,AI的算法靈活多變,技術每天都在推陳出新。FPGA相對來說是更適合網絡邊緣來實現(xiàn)AI計算的技術。因為FPGA硬件可編程的最大特點也可以適應快速變化的機器學習算法。憑借本身的特點,可以做靈活的計算資源,包括預處理、后處理、圖像處理和濾波等數(shù)據。還能進行性能擴展,可并行和串行執(zhí)行多個案例。

再來很重要的一點是,由于邊緣端對功耗的敏感度和尺寸的大小是有比較嚴格的要求,而小封裝和低功耗恰好是Lattice FPGA的特點。Lattice的FPGA可以在網絡邊緣AI實現(xiàn)一毫瓦到低于一瓦的超低功耗。同時,Lattice FPGA內嵌了很多安全功能區(qū)域,具有很高的安全性。

反過來,AI技術的快速創(chuàng)新對可編程邏輯器件FPGA來說是有利的,F(xiàn)PGA可以配合AI技術隨時為用戶提供最佳體驗。據Lattice亞太區(qū)資深市場開拓經理林國松的深一步解釋,近十年來AI模型快速發(fā)展,從下圖中可以看到從2012年到2021年AI分類模型創(chuàng)新的數(shù)量在逐年遞增。由于AI技術的不斷創(chuàng)新,導致不斷有新的實現(xiàn)方式產生。而新的實現(xiàn)方式的產生需要有更快的硬件來實現(xiàn),這就需要硬件和算法上的優(yōu)化。


網絡邊緣AI推理,Lattice低功耗FPGA的又一大用武之地


對此,深諳邊緣計算需求的Lattice,此次更新了其低功耗、AI/ML解決方案的最新路線圖。

發(fā)布SenseAI 4.1,AI與傳感器的融合



現(xiàn)在客戶端計算設備越來越需要快速響應和情景感知式的用戶體驗、高質量視頻會議和協(xié)作式應用。于是Lattice將其sensAITM與Nexus?這兩個解決方案集合在一起,發(fā)布了sensAI解決方案集合的最新版本4.1,來幫助OEM廠商開發(fā)智能、實時在線、具有低功耗和硬件加速AI功能的設備。它支持萊迪思基于AI的應用路線圖。


網絡邊緣AI推理,Lattice低功耗FPGA的又一大用武之地


本次新推出的sensAI 4.1會增加支持的器件是Lattice今年剛剛推出的Nexus系列產品CetusPro-NX器件。并對這個器件進行了優(yōu)化,提升了CetusPro-NX的容量,同時計算的能力和功效也會提高,在這塊器件基礎上,Lattice推出了相對應的開發(fā)版,他們稱之為聲音和視覺機器學習版。也提供了支持這塊新芯片的CNN Plus加速器,以及相對應的sensAI Studio(后文有詳細介紹)。

sensAI 4.1將會提供三個參考設計,包括人員偵測、注意力追蹤和目標分類。同時,在智能家居、智慧城市、工廠、智能汽車這些方面Lattice也都可以提供相對應的設計服務。Lattice一直使用的訓練設計的方法是通過標準的Caffe、TensorFlow、TensorFlowLite、Keras等常用培訓網絡培訓完之后,再交由Lattice提供的神經網絡編譯器,編譯成相對應的可執(zhí)行指令,這些指令最終會由Lattice的芯片調取使用。

林國松也介紹了Lattice在軟硬件方面所進行的優(yōu)化方法。在硬件優(yōu)化上,主要是兩方面的結合,一個是把SenseAI組件通過FPGA的設計工具,將Lattice Radiant和DIAMOND結合之后,產生FPGA比特流。另一個是,把訓練后的模型錄進神經網絡編譯器,這樣產生一個類似于中央處理器的功能,而后產生的量化的權重和指令更多指向于執(zhí)行的代碼,這兩個結合之后,最終產生機器學習的框架。


網絡邊緣AI推理,Lattice低功耗FPGA的又一大用武之地


在軟件設計層面,為了便于大家開發(fā)設計,Lattice專門提供了一個PROPEL的軟件,它能對整個內部結果進行類似于C代碼的控制,而不是使用比較難以上手的FPGA的開發(fā)代碼,便于初學者能夠調用一些基本的指令進行一些控制。具體設計參看下圖,下圖中左側更多指的是Lattice的開發(fā)AI引擎的一些架構,包括機器學習引擎,以此能夠做視覺的收取,同時做軟核的控制。


網絡邊緣AI推理,Lattice低功耗FPGA的又一大用武之地


Lattice還推出了一款易于使用的工具sensAI Studio,這是一款基于GUI的工具,擁有AI模型庫,經過配置和訓練可適用于各類主流應用場景。林國松解釋道,之所以推出這個Studio是因為我們收到了很多關于配置機器學習培訓環(huán)境的反饋,用戶在這方面會遇到一些難題,主要是由于這些培訓環(huán)境的應用場景,應用軟件更新的非常快,有可能幾天就會有一次更新,所以軟件和軟件之間的兼容性就很難解決。為了解決這樣的問題,Lattice特別推出了Lattice sensAI Studio。


網絡邊緣AI推理,Lattice低功耗FPGA的又一大用武之地


在具體的應用中,SenseAI 4.1可以以低功耗追蹤多個目標,例如其最新推出的CrossLink-NX,在分辨率為224×224×3色RGB的情況下,其速度可以達到33fps,可以進行目標分類和追蹤多個目標,例如在條形碼檢測、瑕疵檢測及機器人導航。值得一提的是,CrossLink-NX這個器件本身是作為低功耗的器件,是Lattice花了很大的力氣,專為網絡邊緣應用打造的。


網絡邊緣AI推理,Lattice低功耗FPGA的又一大用武之地


SenseAI助力下一代PC體驗



現(xiàn)在PC已經成為大家工作和生活中接觸時間最長的電子工具之一。根據smartinsights的調查,用戶習慣于在白天的時候使用手提電腦,而晚上更多是使用臺式電腦。而Lattice也觀察到,下一代PC的趨勢將集中在智能和感知,強大的協(xié)作能力和輕薄的外形三個方面。

Lattice sensAI的智能和感知AI解決方案提供了用戶檢測、注意力追蹤、旁觀者檢測及面部取景功能。具體來看,現(xiàn)在多數(shù)的電腦都是以鼠標是否移動來判定用戶是否在使用電腦的,如果鼠標長期未移動,電腦就會息屏。Lattice更高端的用戶檢測,通過注意力追蹤可以延長28%的電池壽命,具體表現(xiàn)為在人接近電腦時自動開啟,并持續(xù)追蹤注意力,在離開時自動鎖屏;旁觀者檢測可以保護用戶隱私數(shù)據,而面部取景也是很多協(xié)作式會議所需的場景。


網絡邊緣AI推理,Lattice低功耗FPGA的又一大用武之地


可能很多人會擔心用戶隱私的問題,這點林國松也做出了解釋,sensAI是符合道德和合理的AI設計考量。使用Lattice sensAI可以不把圖像傳給電腦,直接在硬件上處理。也就是通過Lattice sensAI只會傳出一個結果,而不會傳輸圖像,這樣的話用戶的肖像權就不會受到侵害。同時Lattice sensAI也專注于用戶體驗,針對不同的復雜場景進行壓力測試,包括燈光,場景及用戶面部和頭部穿戴的變化。

為了能夠讓Lattice這款產品能夠在PC上得到落實,Lattice需要和OEM、芯片廠商、操作系統(tǒng)和軟件的支持,還需要傳感器的合作。在傳感器方面,Lattice本身就與很多傳感器廠商有很好的合作,可以保證傳感器輸出的信息能夠和不同的AP的處理器進行很好的互聯(lián)。

寫在最后



在FPGA這個市場上,Lattice一直穩(wěn)扎穩(wěn)打,而且這幾年的攻勢愈發(fā)迅猛??梢钥吹?,近幾年Lattice推出新器件的步伐明顯增快,差不多每年都會推出一款新器件,包括CrossLink-NX,Certus-NX這兩款都是去年推出的,Mach-NX、CertusPro-NX都是今年推的,明年上半年還會有新產品發(fā)布,同時后續(xù)的一系列產品都已經在細化中。


*免責聲明:本文由作者原創(chuàng)。文章內容系作者個人觀點,半導體行業(yè)觀察轉載僅為了傳達一種不同的觀點,不代表半導體行業(yè)觀察對該觀點贊同或支持,如果有任何異議,歡迎聯(lián)系半導體行業(yè)觀察。


今天是《半導體行業(yè)觀察》為您分享的第2870內容,歡迎關注。


晶圓|集成電路|設備|汽車芯片|存儲|臺積電|AI|封裝

鮮花

握手

雷人

路過

雞蛋

關注我們:東遠物聯(lián)

抖音

微信咨詢

咨詢電話:

199-2833-9866

D-Think | 廣州東遠智能科技有限公司

地址:廣州市白云區(qū)北太路1633號廣州民營科技園科創(chuàng)中心2棟16樓

電話:+86 020-87227952 Email:[email protected]

Copyright  ©2020  東遠科技  粵ICP備2024254589號

免責申明:部分圖文表述來自于網絡,如有侵權請聯(lián)系作者刪除!