無(wú)人機(jī)能夠通過(guò)高空拍攝快速獲取大范圍、多角度的地面信息。但是傳統(tǒng)的攝像頭只能獲取視頻數(shù)據(jù),對(duì)于許多需要進(jìn)行數(shù)據(jù)分析的行業(yè)來(lái)說(shuō)顯然不夠智能化,從無(wú)人機(jī)視頻數(shù)據(jù)中快速獲取提煉大量有價(jià)值的信息,不僅能夠提升工作效率,還能夠減少不小的成本支出。這就是無(wú)人機(jī)的AI識(shí)別能力。通過(guò)識(shí)別算法,在無(wú)人機(jī)工作時(shí)就對(duì)目標(biāo)范圍進(jìn)行AI檢測(cè)識(shí)別,從而提煉所需信息。這就需要對(duì)無(wú)人機(jī)進(jìn)行智能化改造,可以在傳統(tǒng)無(wú)人機(jī)吊艙中植入成都慧視開(kāi)發(fā)的高性能AI圖像處理板,如利用RK3588深度開(kāi)發(fā)而成的Viztra-HE030圖像處理板,6.0TOPS的算力能夠快速處理無(wú)人機(jī)識(shí)別到的復(fù)雜畫面信息,這樣就有了硬件基礎(chǔ),剩下的就需要對(duì)自身算法進(jìn)行不斷優(yōu)化提升?;垡旳I圖像處理板都可以定制哪些接口?成都性價(jià)比高圖像識(shí)別模塊方法
實(shí)現(xiàn)這些功能的技術(shù)中,圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識(shí)別的硬件能力,植入相應(yīng)的AI算法,無(wú)人機(jī)就相當(dāng)于裝上了“智慧眼”,而且這個(gè)“智慧眼”居于高空,能夠在一個(gè)定點(diǎn),俯瞰大范圍,實(shí)時(shí)監(jiān)控貨物的存放狀態(tài)。遠(yuǎn)程控制技術(shù)基于網(wǎng)絡(luò)通信,通過(guò)和圖像處理板的結(jié)合,能夠?qū)崿F(xiàn)低延時(shí)低帶寬的圖像傳輸處理。在實(shí)際落地應(yīng)用中,可以采用成都慧視開(kāi)發(fā)的高性能圖像處理板,其中RV1126系列的Viztra-LE026圖像處理板,就是無(wú)人機(jī)的完美搭子。這款圖像處理板具備2.0TOPS的算力,能夠根據(jù)無(wú)人機(jī)型號(hào)進(jìn)行接口定制,整體尺寸在40mm×40mm×10mm左右(核心板+接口板),小巧的外形即便是小型無(wú)人機(jī)也能夠裝上。此外,板卡整體功耗在4W左右,不會(huì)過(guò)多增加無(wú)人機(jī)的負(fù)擔(dān)。陜西車流圖像識(shí)別模塊供應(yīng)商Viztra-LE034是采用RV1126開(kāi)發(fā)而成的AI識(shí)別模塊。
如果是一般環(huán)境,則可以選擇Viztra-ME025這樣的中端圖像處理板,板卡采用RK3399Pro這樣的芯片,雙Cortex-A72+四Cortex-A53大小核CPU結(jié)構(gòu)設(shè)計(jì);CPU主頻1.8GHz,輸出3.0TOPS的算力。而需要輕型、小型化設(shè)計(jì)的場(chǎng)景,如小型無(wú)人機(jī)吊艙,為了盡量節(jié)省空間占用,節(jié)約無(wú)人機(jī)本身能耗,則可以選擇小型化、低功耗的圖像處理板Viztra-LE026,板卡采用RV1126開(kāi)發(fā)而成,Φ38*12mm的外形設(shè)計(jì)用在空間緊湊的傳統(tǒng)攝像頭中,十分合適。有了圖像處理板,還需要定制相應(yīng)的AI算法,在算法的賦能下,智能化的攝像頭就打造完成,它能夠?qū)崿F(xiàn)對(duì)視野范圍內(nèi)的智能AI識(shí)別檢測(cè)。
無(wú)人機(jī)夜間工作時(shí)需要依靠紅外機(jī)芯進(jìn)行高清成像,而想要具備AI檢測(cè)識(shí)別的能力則可以通過(guò)植入圖像處理板。成都慧視可以根據(jù)需求提供整套的建設(shè)方案,實(shí)現(xiàn)快速集成開(kāi)發(fā)?;垡昖iztra-LE026圖像處理板+MiNO?17紅外機(jī)芯的組合方案,兩款產(chǎn)品均使用小巧設(shè)計(jì),整體組合重量在30g左右,并且都采用小功耗設(shè)計(jì),用在無(wú)人機(jī)領(lǐng)域不會(huì)過(guò)多增加負(fù)擔(dān)。在算法的賦能下,能夠?qū)崿F(xiàn)穩(wěn)定的目標(biāo)檢測(cè)識(shí)別。Viztra-LE026圖像處理板重量在10g左右,采用了瑞芯微全國(guó)產(chǎn)化芯片RV1126,能夠輸出2.0TOPS的算力,功耗不高于4W。能夠以30Hz幀率跟蹤像素2*2的目標(biāo),能夠識(shí)別像素為12*12的目標(biāo),且識(shí)別率高于85%。而MiNO?17紅外機(jī)芯重量在20g左右(凈重5g(不含鏡頭)),像素分辨率為640*512,采用9/13/25mm三種定焦設(shè)計(jì),支持18中偽彩選擇,功耗小于0.75W。哪家公司能夠快速集成開(kāi)發(fā)高性能的RK3588圖像處理板?
在許多領(lǐng)域,無(wú)人機(jī)的作業(yè)環(huán)境相對(duì)復(fù)雜,需要識(shí)別處理圖像背景目標(biāo)眾多,這種環(huán)境下,要想實(shí)現(xiàn)更高精度的檢測(cè)識(shí)別效果,圖像處理板的性能至關(guān)重要。在慧視光電開(kāi)發(fā)的多款圖像處理板中,Viztra-HE030圖像處理板以6.0TOPS得以勝任。這款板卡采用了瑞芯微旗艦級(jí)芯片RK3588,8nmLP制程,搭載八核64位CPU,主頻高達(dá)2.4GHz。集成ARMMali-G610MP4四核GPU,內(nèi)置AI加速器NPU,支持主流的深度學(xué)習(xí)框架。性能強(qiáng)勁的RK3588可為無(wú)人機(jī)AI識(shí)別的應(yīng)用場(chǎng)景帶來(lái)更強(qiáng)大的性能表現(xiàn)。如何提升無(wú)人設(shè)備的遠(yuǎn)程識(shí)別能力?四川人臉識(shí)別圖像識(shí)別模塊廠家
MIPI相機(jī)目標(biāo)識(shí)別方案。成都性價(jià)比高圖像識(shí)別模塊方法
多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過(guò)目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo),并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化,而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況(例如無(wú)人機(jī)高空檢測(cè)),就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級(jí)別的語(yǔ)義特征,這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型,在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì),通過(guò)補(bǔ)償攝像頭運(yùn)動(dòng)來(lái)減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來(lái)匹配候選目標(biāo)。成都性價(jià)比高圖像識(shí)別模塊方法