無人機的智能化是推動低空經(jīng)濟發(fā)展的重要引擎,打造智能無人機需要通信、控制、傳感器等多種技術(shù)的共同作用,其中圖像處理板的目標檢測識別技術(shù)能夠在智慧巡檢、智慧交通管理、智慧河湖巡查等領(lǐng)域有著積極作用。在成都慧視開發(fā)的多款圖像處理板中,Viztra-LE026以小型化、低功耗的特點深受行業(yè)青睞。Viztra-LE026圖像處理板采用了全國產(chǎn)化芯片RV1126,板卡外形呈圓形設(shè)計,尺寸為Φ38mm*12mm,重量12g,雖然小巧,但是算力可達2.0TOPS,能夠憑借1路MIPI視頻輸入和1路DVP視頻輸入實現(xiàn)對目標實時自主檢測、識別,并自動或手動鎖定跟蹤人、車、船等目標。振動測試是否通過正是確定板卡能否在這樣的環(huán)境下正常完成工作的關(guān)鍵手段。甘肅目標跟蹤功效
成都慧視開發(fā)的RK3588系列高性能圖像處理板Viztra-HE030,能夠在-40℃~65℃的環(huán)境中進行工作,用在寒冷的北方冬天電力巡檢領(lǐng)域,可以有效支撐無人機的穩(wěn)定工作。此外,這款板卡的存儲溫度范圍在-55℃~75℃,遇到更加極端寒冷的天氣時,不使用也能夠有效抗寒。RK3588屬于旗艦機芯片,搭載八核64位CPU,主頻高達2.4GHz。集成ARMMali-G610MP4四核GPU,內(nèi)置AI加速器NPU,可提供6Tops算力,用在電力巡檢領(lǐng)域能夠快速穩(wěn)定處理復(fù)雜的場景,幫助進行保供電工作。甘肅目標跟蹤功效成都慧視的跟蹤版是國產(chǎn)化的!
目標跟蹤時,多維度、多層級信息融合也十分重要。為了提高對運動目標表觀描述的準確度與可信性,現(xiàn)有的檢測與跟蹤算法通常對時域、空域、頻域等不同特征信息進行融合,綜合利用各種冗余、互補信息提升算法的精確性與魯棒性.然而,目前大多算法還只是對單一時間、單一空間的多尺度信息進行融合,使用者可以考慮從時間、推理等不同維度,對特征、決策等不同層級的多源互補信息進行融合,提升檢測與跟蹤的準確性。成都慧視開發(fā)的Viztra-HE030圖像處理板采用了RK3588高性能芯片,工業(yè)級的處理能力能夠運用到諸多行業(yè)。
多目標跟蹤是指在連續(xù)的圖像中,通過目標檢測算法識別出每一幀中的目標,并在時間上跟蹤它們的位置和狀態(tài)。但目標會不斷發(fā)生尺度、形變、遮擋等變化,而且還會有目標出現(xiàn)和消失的情況,再加上視頻采集端的相機所處環(huán)境可能受到外界影響導(dǎo)致抖動的情況(例如無人機高空檢測),就會給多目標跟蹤造成一定的困難。由于我們不能控制目標,所以只能從視頻采集端維護跟蹤的穩(wěn)定性。因此,成都慧視針對于多目標檢測跟蹤抖動丟失的優(yōu)化方法是:1.改進目標檢測,使用更加魯棒的目標檢測算法。2.增強特征描述,利用深度學(xué)習提取更高級別的語義特征,這些特征對于小范圍內(nèi)的視角變化具有更好的不變性3.改進運動模型,在算法中加入對攝像頭運動的估計,通過補償攝像頭運動來減小目標真實運動與預(yù)測之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來匹配候選目標。成都慧視光電技術(shù)有限公司推出基于全國產(chǎn)化RV1126板的高性能圖像跟蹤板卡。
另外,經(jīng)典的跟蹤方法還有基于特征點的光流跟蹤,在目標上提取一些特征點,然后在下一幀計算這些特征點的光流匹配點,統(tǒng)計得到目標的位置。在跟蹤的過程中,需要不斷補充新的特征點,刪除置信度不佳的特征點,以此來適應(yīng)目標在運動中的形狀變化。本質(zhì)上可以認為光流跟蹤屬于用特征點的來表征目標模型的方法。在深度學(xué)習和相關(guān)濾波的跟蹤方法出現(xiàn)后,經(jīng)典的跟蹤方法都被舍棄,這主要是因為這些經(jīng)典方法無法處理和適應(yīng)復(fù)雜的跟蹤變化,它們的魯棒性和準確度都被前沿的算法所超越,但是,了解它們對理解跟蹤過程是有必要的,有些方法在工程上仍然有十分重要的應(yīng)用,常常被當作一種重要的輔助手段。慧視光電開發(fā)的慧視RV1126圖像處理板,采用了國產(chǎn)高性能CPU。湖南附近目標跟蹤
智能圖像處理板在邊海防中的應(yīng)用。甘肅目標跟蹤功效
目前,采用圖像識別技術(shù)來實現(xiàn)無人機規(guī)避其他障礙物是一個有效的方法。通過在無人機上植入圖像識別模塊,這個模塊由圖像處理板和相機組合而成,通過算法的賦能,就能針對不同物體實現(xiàn)快速AI識別,然后實現(xiàn)規(guī)避。而在圖像處理板的選擇上,成都慧視開發(fā)的Viztra-LE026圖像處理板就十分合適。這塊板卡采用了RV1126開發(fā)設(shè)計而成,外形呈圓形,體積小巧,尺寸為Ф38mm*12mm,重量只有12g,用在無人機上不會過多占用空間。此外,該板卡功耗≤4W,也不會增加無人機的續(xù)航負擔。甘肅目標跟蹤功效