萊迪思半導(dǎo)體公司(NASDAQ:LSCC),低功耗可編程器件的領(lǐng)先供應(yīng)商,今日宣布其低功耗、AI/ML解決方案的最新路線(xiàn)圖,這些解決方案可以幫助客戶(hù)端計(jì)算設(shè)備等網(wǎng)絡(luò)邊緣應(yīng)用延長(zhǎng)電池壽命,帶來(lái)創(chuàng)新的用戶(hù)體驗(yàn)。它們采用屢獲殊榮的Lattice sensAITM解決方案集合構(gòu)建,在Lattice Nexus™ FPGA上運(yùn)行,可以幫助OEM廠商開(kāi)發(fā)智能、實(shí)時(shí)在線(xiàn)、具有低功耗和硬件加速AI功能的設(shè)備,這些設(shè)備還能現(xiàn)場(chǎng)進(jìn)行升級(jí),支持未來(lái)更多的AI算法。
客戶(hù)端計(jì)算設(shè)備越來(lái)越需要快速響應(yīng)和情景感知式的用戶(hù)體驗(yàn)、高質(zhì)量視頻會(huì)議和協(xié)作式應(yīng)用。萊迪思Nexus FPGA和sensAI解決方案集合是開(kāi)發(fā)計(jì)算機(jī)視覺(jué)和傳感器融合應(yīng)用的理想平臺(tái),可以提升用戶(hù)的參與和協(xié)作,保護(hù)用戶(hù)隱私。例如,客戶(hù)端設(shè)備可以分析攝像頭采集的圖像數(shù)據(jù),確定后方人員是否離用戶(hù)過(guò)于靠近,還可以在用戶(hù)的注意力轉(zhuǎn)移到別處時(shí),模糊屏幕,保護(hù)隱私,或者調(diào)暗屏幕,延長(zhǎng)電池使用時(shí)間。
萊迪思市場(chǎng)和業(yè)務(wù)發(fā)展副總裁Matt Dobrodziej表示:“基于視覺(jué)、聲音和其他傳感器的AI應(yīng)用將革新客戶(hù)端計(jì)算體驗(yàn)。我們的sensAI支持各類(lèi)網(wǎng)絡(luò)邊緣AI解決方案,賦予客戶(hù)端設(shè)備情境感知能力,讓它們知道自身在何時(shí)、何地、以何種方式被使用。我們的Nexus FPGA則以行業(yè)領(lǐng)先的低功耗來(lái)實(shí)現(xiàn)這一功能。”
與使用CPU來(lái)驅(qū)動(dòng)AI應(yīng)用的設(shè)備相比,采用sensAI開(kāi)發(fā),并在萊迪思FPGA上運(yùn)行的AI計(jì)算設(shè)備的電池使用時(shí)間延長(zhǎng)了28%。sensAI還支持現(xiàn)場(chǎng)軟件更新,從而保持AI算法的演進(jìn),還能讓OEM廠商靈活選擇不同的傳感器和SoC技術(shù)來(lái)適配他們的設(shè)備。
萊迪思正與領(lǐng)先的AI生態(tài)系統(tǒng)伙伴合作,制定萊迪思客戶(hù)端計(jì)算AI體驗(yàn)的發(fā)展路線(xiàn)圖。
Mirametrix副總裁Stephen Morganstein表示:“我們的Glance by Mirametrix注意力感應(yīng)軟件可以捕捉用戶(hù)的面部、眼睛和凝視動(dòng)作,從而了解用戶(hù)的意識(shí)和注意力。這項(xiàng)獨(dú)特的技術(shù)開(kāi)發(fā)的智能設(shè)備能提供更自然和沉浸式的用戶(hù)體驗(yàn)和設(shè)備交互。萊迪思的sensAI解決方案集合和低功耗FPGA可幫助開(kāi)發(fā)人員實(shí)現(xiàn)新穎的AI功能,提高設(shè)備的電池壽命。”
sensAI解決方案集合的最新版本(v4.1)現(xiàn)已發(fā)布,支持萊迪思基于AI的應(yīng)用路線(xiàn)圖,其增強(qiáng)特性和新特性包括:
- 客戶(hù)端計(jì)算AI體驗(yàn)參考設(shè)計(jì)
用戶(hù)檢測(cè):用戶(hù)接近或離開(kāi)設(shè)備時(shí)會(huì)自動(dòng)啟動(dòng)或關(guān)閉客戶(hù)端設(shè)備
注意力追蹤:當(dāng)用戶(hù)的注意力不在屏幕上時(shí),降低設(shè)備的屏幕亮度,節(jié)約電量,延長(zhǎng)使用時(shí)間
面部取景:在視頻會(huì)議應(yīng)用中提升視頻體驗(yàn)
旁邊者檢測(cè):檢測(cè)站在設(shè)備后面潛在的窺視者,模糊屏幕以保障數(shù)據(jù)隱私
- 更多應(yīng)用支持——sensAI 4.1版本在性能和準(zhǔn)確度方面的提升有助于拓展其目標(biāo)應(yīng)用,包括自動(dòng)化工業(yè)系統(tǒng)中使用的高精度目標(biāo)檢測(cè)和瑕疵檢測(cè)等應(yīng)用。該解決方案集合擁有全新硬件平臺(tái),包括板載圖像傳感器、兩個(gè)I2S麥克風(fēng)和用于添加更多傳感器的擴(kuò)展連接器,助力基于語(yǔ)音和視覺(jué)的機(jī)器學(xué)習(xí)應(yīng)用的開(kāi)發(fā)。
- 易于使用的工具——sensAI還更新了神經(jīng)網(wǎng)絡(luò)編譯器,支持Lattice sensAI Studio,這是一款基于GUI的工具,擁有AI模型庫(kù),經(jīng)過(guò)配置和訓(xùn)練可適用于各類(lèi)主流應(yīng)用場(chǎng)景。sensAI Studio現(xiàn)支持AutoML功能,能根據(jù)應(yīng)用和數(shù)據(jù)集目標(biāo)來(lái)創(chuàng)建機(jī)器學(xué)習(xí)模塊。一些基于Mobilenet機(jī)器學(xué)習(xí)推理訓(xùn)練平臺(tái)的模型專(zhuān)為最新的Nexus系列產(chǎn)品——Lattice CertusPro™-NX進(jìn)行了優(yōu)化。sensAI還兼容其他廣泛使用的機(jī)器學(xué)習(xí)平臺(tái),包括最新版本的Caffe、Keras、TensorFlow和TensorFlow Lite。