不論是機(jī)器人還是智能設(shè)備,都需要與人、與周?chē)h(huán)境進(jìn)行交互,這些應(yīng)用場(chǎng)景都需要應(yīng)用到機(jī)器視覺(jué)。在機(jī)器設(shè)備自動(dòng)化、智能化發(fā)展的趨勢(shì)下,機(jī)器視覺(jué)正步入新的發(fā)展階段,對(duì)于三維深度感知能力的需求也在不斷增加。
人工智能2.0時(shí)代,3D視覺(jué)迎來(lái)發(fā)展春天
銀牛微電子聯(lián)合創(chuàng)始人兼首席戰(zhàn)略官白逸先生近期在接受維科網(wǎng)機(jī)器人采訪(fǎng)時(shí)表示,傳統(tǒng)的2D機(jī)器視覺(jué),不僅提供的數(shù)據(jù)質(zhì)量有限,還缺乏空間感,大大影響了現(xiàn)有的人工智能技術(shù)的發(fā)展。因此,在全新的人工智能2.0時(shí)代,傳統(tǒng)的2D機(jī)器視覺(jué)亟需快速向3D機(jī)器視覺(jué)升級(jí)。
白逸表示,3D視覺(jué)能夠產(chǎn)生2D系統(tǒng)不能產(chǎn)生的深度立體信息,因此其使用范圍更廣,可以測(cè)量與深度相關(guān)的特征,例如物體平直度,表面積和體積,能夠提供更真實(shí)的空間感,獲得更精確的相對(duì)位置。在工業(yè)應(yīng)用場(chǎng)景中,3D視覺(jué)的出現(xiàn)正是硬迎合了機(jī)器人向智能化進(jìn)階的趨勢(shì)。
3D視覺(jué)感知技術(shù)是高端制造和智能機(jī)器人的關(guān)鍵技術(shù),它賦予了機(jī)器人“眼睛和大腦”的三維感知能力,使機(jī)器人具備精準(zhǔn)感知、敏捷運(yùn)動(dòng)、自主決策等能力,是構(gòu)建AI智能機(jī)器生態(tài)的重要一環(huán)。
隨著技術(shù)的不斷升級(jí)迭代和落地,以及受疫情以及勞動(dòng)力緊缺等因素的影響,智能機(jī)器人迎來(lái)爆發(fā)前夜,與之相關(guān)的3D機(jī)器視覺(jué)技術(shù)風(fēng)口正起。
3D機(jī)器視覺(jué)+AI技術(shù),助力機(jī)器人行業(yè)變革
白逸表示,完整的3D感知和AI異構(gòu)計(jì)算平臺(tái),是機(jī)器視覺(jué)未來(lái)的發(fā)展趨勢(shì)。作為一家專(zhuān)注3D和AI芯片、模組及產(chǎn)品設(shè)計(jì)的高新科技企業(yè),銀牛微電子的目標(biāo)是向3D視覺(jué)應(yīng)用市場(chǎng)提供全球領(lǐng)先的底層技術(shù),構(gòu)建AI進(jìn)入3D機(jī)器視覺(jué)時(shí)代后的異構(gòu)計(jì)算平臺(tái)以及平臺(tái)之上的生態(tài)系統(tǒng)。
2020年11月,銀牛微電子完成對(duì)全球領(lǐng)先的3D視覺(jué)芯片設(shè)計(jì)企業(yè)以色列Inuitive的投資入股。Inuitive的核心技術(shù)高度集成了3D視覺(jué)深度引擎技術(shù)、SLAM及AI功能,模擬人腦+人眼,為客戶(hù)提供前沿的實(shí)時(shí)3D感知、計(jì)算到系統(tǒng)一體化的解決方案。
此外,銀牛的芯片及模組已在全球范圍內(nèi)應(yīng)用在智能機(jī)器人、元宇宙、輔助駕駛、3D交互、3D人臉識(shí)別、無(wú)人機(jī)、醫(yī)美、工業(yè)檢測(cè)等多個(gè)前沿3D視覺(jué)應(yīng)用領(lǐng)域的龍頭企業(yè)產(chǎn)品中。
銀牛微電子面向機(jī)器人市場(chǎng)已推出兩款實(shí)現(xiàn)量產(chǎn)的、顛覆創(chuàng)新產(chǎn)品—3D機(jī)器視覺(jué)模組C158和R132,可高效應(yīng)用于機(jī)器人避障,物體識(shí)別、SLAM空間定位等。白逸表示,銀牛3D機(jī)器視覺(jué)模組R132基于全球領(lǐng)先、高度集成的3D人工智能異構(gòu)計(jì)算平臺(tái)芯片NU4000設(shè)計(jì)。由于該芯片采用12nm工藝,多核架構(gòu),單芯片集成3D深度感知、SLAM實(shí)時(shí)定位建圖引擎、人工智能及通用CPU于一體,可實(shí)現(xiàn)從3D感知、計(jì)算到系統(tǒng)一體化的解決方案,不僅能夠幫助機(jī)器人實(shí)現(xiàn)智能升級(jí),還能大大降低機(jī)器人客戶(hù)的系統(tǒng)成本。
銀牛微電子新推出的R132模組具備眾多亮點(diǎn):強(qiáng)大的3D深度感知引擎:深度分辨率1080x720@60fps,感知距離0.15m-3m,精度誤差;更大FOV深度視場(chǎng)角88°×58°,讓機(jī)器人擁有更寬廣的視野;RGB攝像頭FOV完全覆蓋深度FOV:RGB分辨率1600×1200,視場(chǎng)角90°×73°,實(shí)時(shí)檢測(cè)識(shí)別跟蹤多目標(biāo)物體,對(duì)實(shí)現(xiàn)RGBD多傳感器的融合提供方便;強(qiáng)勁的NU4000綜合AI運(yùn)算能力和靈活配置,通用ARM核支持不同應(yīng)用,可獨(dú)立運(yùn)行系統(tǒng),減少主控芯片和系統(tǒng)的負(fù)擔(dān),提高實(shí)時(shí)性;低功耗,更小尺寸:90mm×25mm×25mm,功耗低至1.4W;板載IMU:內(nèi)外參數(shù)完整標(biāo)定的板載IMU。R132模組目前聚焦服務(wù)機(jī)器人行業(yè)應(yīng)用,未來(lái)還可以拓展到無(wú)人機(jī)、直播設(shè)備、3D掃描、智能家居、機(jī)器視覺(jué)等行業(yè)應(yīng)用。
破解3D視覺(jué)應(yīng)用瓶頸,助力行業(yè)生態(tài)圈健康發(fā)展
銀牛微電子的產(chǎn)品和解決方案不僅具備復(fù)雜SOC(芯片級(jí)系統(tǒng))的能力,還具備業(yè)界少有的雙目機(jī)器視覺(jué)技術(shù)。據(jù)白逸介紹,銀牛3D機(jī)器視覺(jué)模組采用的是主動(dòng)雙目立體視覺(jué)技術(shù)。雙目立體視覺(jué)成像具有高分辨率、高精度的3D成像、抗強(qiáng)光干擾性能強(qiáng)、識(shí)別距離遠(yuǎn)等優(yōu)勢(shì)。隨著3D機(jī)器視覺(jué)技術(shù)的發(fā)展,對(duì)于精度、FPS、分辨率、識(shí)別距離的要求會(huì)越來(lái)越高的,這也是雙目立體視覺(jué)技術(shù)的最大優(yōu)勢(shì),未來(lái)甚至可以達(dá)到與人眼接近的水平,大大擴(kuò)展了3D視覺(jué)機(jī)器人的應(yīng)用場(chǎng)景。
談及整個(gè)行業(yè)的推廣和應(yīng)用瓶頸時(shí),白逸認(rèn)為,一方面提高開(kāi)發(fā)設(shè)計(jì)的效率,另一方面要降低成本,3D視覺(jué)機(jī)器人才能迎來(lái)爆發(fā)式的增長(zhǎng)。銀牛微電子的集成解決方案不僅擁有自主的深度學(xué)習(xí)算法以及高度集成的硬件系統(tǒng),大大降低客戶(hù)企業(yè)的開(kāi)發(fā)周期,還采用了豐富成熟穩(wěn)定的軟件開(kāi)發(fā)系統(tǒng),即SDK軟件開(kāi)發(fā)環(huán)境,提升了解決方案的穩(wěn)定性和適用性,更加方便于軟硬件的升級(jí)迭代。這一系列的優(yōu)勢(shì),能夠大大降低行業(yè)的應(yīng)用成本,讓終端客戶(hù)和市場(chǎng)創(chuàng)造更多的價(jià)值,有利于3D視覺(jué)機(jī)器人的行業(yè)生態(tài)圈更好更快的發(fā)展。
如今,機(jī)器人產(chǎn)業(yè)正處在行業(yè)爆發(fā)期,銀牛攜全球領(lǐng)先的3D機(jī)器視覺(jué)技術(shù)和解決方案賦能機(jī)器人產(chǎn)業(yè),實(shí)際解決機(jī)器人避障、3D重構(gòu)、實(shí)時(shí)定位等問(wèn)題,為機(jī)器人客戶(hù)創(chuàng)造更多價(jià)值。面對(duì)充滿(mǎn)無(wú)限潛力的未來(lái),在采訪(fǎng)的最后,白逸表示,銀牛微電子將一如既往地持續(xù)推動(dòng)3D機(jī)器視覺(jué)及AI技術(shù)的研發(fā)和產(chǎn)品迭代,致力于成為全球3D人工智能時(shí)代異構(gòu)計(jì)算平臺(tái)的引領(lǐng)者,通過(guò)更全面的產(chǎn)品和服務(wù)助力中國(guó)機(jī)器人產(chǎn)業(yè)升級(jí),推動(dòng)行業(yè)生態(tài)健康發(fā)展。