多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過(guò)目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo),并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化,而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況(例如無(wú)人機(jī)高空檢測(cè)),就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級(jí)別的語(yǔ)義特征,這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型,在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì),通過(guò)補(bǔ)償攝像頭運(yùn)動(dòng)來(lái)減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來(lái)匹配候選目標(biāo)。小目標(biāo)識(shí)別算法可以找成都慧視定制!山西國(guó)產(chǎn)化目標(biāo)識(shí)別開(kāi)發(fā)
RK3588作為瑞芯微旗艦級(jí)芯片,工業(yè)級(jí)的算力受到了很多領(lǐng)域的青睞,但是由于前端相機(jī)的選擇不同,并不是每塊RK3588的圖像處理板都可以直接拿來(lái)使用,需要的是根據(jù)相機(jī)接口和應(yīng)用場(chǎng)景進(jìn)行深度定制。成都慧視光電技術(shù)有限公司就有這樣的快速集成定制的能力。作為擁有多年圖像處理板開(kāi)發(fā)經(jīng)驗(yàn)的團(tuán)隊(duì),成都慧視能夠快速定制SDI、CVBS、CAMERALINK、USB、LVDS、DVP等豐富接口的RK3588系列圖像處理板,并能夠根據(jù)應(yīng)用環(huán)境定制外殼、散熱器等。北京專業(yè)目標(biāo)識(shí)別控制軟件Viztra-LE026圖像處理板是一塊占用空間小的圖像處理板。

但這也遇到很多難點(diǎn),通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無(wú)卡頓地傳輸,是分析改進(jìn)這個(gè)工作需要解決的前期難點(diǎn)。針對(duì)于這個(gè)問(wèn)題,慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合,推出了低延遲低帶寬圖傳解決方案。在一個(gè)窄帶收發(fā)信道內(nèi),例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi),多路視頻和交互控制共用一對(duì)收發(fā)信道,信道支持?jǐn)?shù)據(jù)透?jìng)?,外部系統(tǒng)可以使用該信道,傳輸任意格式的數(shù)據(jù);可實(shí)時(shí)調(diào)整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像??梢允乖O(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實(shí)現(xiàn)視頻中繼轉(zhuǎn)發(fā);能夠基于H265實(shí)時(shí)視頻編碼;可實(shí)現(xiàn)基于視頻流的“人在回路低延遲控制”?;谄胀?0幀相機(jī),實(shí)現(xiàn)15ms的低延遲編解碼,加上數(shù)據(jù)鏈傳輸延遲時(shí)間在30ms左右,目前業(yè)界前列。通用性強(qiáng),使用更加靈活,適用更多應(yīng)用場(chǎng)景;支持多路SDI視頻在低至500K帶寬情況下的同時(shí)傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時(shí)延約60ms(含相機(jī)、編解碼、顯示,不含傳輸),實(shí)現(xiàn)實(shí)時(shí)控制、實(shí)時(shí)打擊。
目前,采用圖像識(shí)別技術(shù)來(lái)實(shí)現(xiàn)無(wú)人機(jī)規(guī)避其他障礙物是一個(gè)有效的方法。通過(guò)在無(wú)人機(jī)上植入圖像識(shí)別模塊,這個(gè)模塊由圖像處理板和相機(jī)組合而成,通過(guò)算法的賦能,就能針對(duì)不同物體實(shí)現(xiàn)快速AI識(shí)別,然后實(shí)現(xiàn)規(guī)避。而在圖像處理板的選擇上,成都慧視開(kāi)發(fā)的Viztra-LE026圖像處理板就十分合適。這塊板卡采用了RV1126開(kāi)發(fā)設(shè)計(jì)而成,外形呈圓形,體積小巧,尺寸為Ф38mm*12mm,重量只有12g,用在無(wú)人機(jī)上不會(huì)過(guò)多占用空間。此外,該板卡功耗≤4W,也不會(huì)增加無(wú)人機(jī)的續(xù)航負(fù)擔(dān)。FPV目標(biāo)識(shí)別用慧視開(kāi)發(fā)的RK3399Pro圖像處理板。

無(wú)人機(jī)要想實(shí)現(xiàn)上述操作,還需要另一個(gè)關(guān)鍵設(shè)備的輔助,那就是無(wú)人機(jī)光電吊艙。光電吊艙的作用是幫助無(wú)人機(jī)進(jìn)行目標(biāo)點(diǎn)定位,畫面實(shí)時(shí)傳輸,從而讓操作人員更加精細(xì)的操控?zé)o人機(jī)進(jìn)行作業(yè)。成都慧視開(kāi)發(fā)的VIZ-100T三軸三光目標(biāo)定位吊艙,集成了10倍光學(xué)變倍可見(jiàn)光相機(jī),640×512高分辨率紅外相機(jī),測(cè)程1.2km半導(dǎo)體激光測(cè)距機(jī),通過(guò)三軸高穩(wěn)定精度平臺(tái)框架,在進(jìn)行水流測(cè)速時(shí)能夠遠(yuǎn)距離采集圖像,對(duì)興趣點(diǎn)目標(biāo)進(jìn)行定位,從而實(shí)現(xiàn)精細(xì)測(cè)量。同時(shí)高清攝像頭能夠?qū)崟r(shí)輸出1080P全高清可見(jiàn)光、紅外視頻,操控人員在后方能夠清晰查看前方畫面,并實(shí)現(xiàn)24小時(shí)晝夜作業(yè)的可能性。反無(wú)人機(jī)目標(biāo)識(shí)別用慧視Viztra-HE030圖像處理板。寧夏國(guó)產(chǎn)化目標(biāo)識(shí)別辦公平臺(tái)
小目標(biāo)識(shí)別解決方案哪里有?山西國(guó)產(chǎn)化目標(biāo)識(shí)別開(kāi)發(fā)
無(wú)人機(jī)的智能化是推動(dòng)低空經(jīng)濟(jì)發(fā)展的重要引擎,打造智能無(wú)人機(jī)需要通信、控制、傳感器等多種技術(shù)的共同作用,其中圖像處理板的目標(biāo)檢測(cè)識(shí)別技術(shù)能夠在智慧巡檢、智慧交通管理、智慧河湖巡查等領(lǐng)域有著積極作用。在成都慧視開(kāi)發(fā)的多款圖像處理板中,Viztra-LE026以小型化、低功耗的特點(diǎn)深受行業(yè)青睞。Viztra-LE026圖像處理板采用了全國(guó)產(chǎn)化芯片RV1126,板卡外形呈圓形設(shè)計(jì),尺寸為Φ38mm*12mm,重量12g,雖然小巧,但是算力可達(dá)2.0TOPS,能夠憑借1路MIPI視頻輸入和1路DVP視頻輸入實(shí)現(xiàn)對(duì)目標(biāo)實(shí)時(shí)自主檢測(cè)、識(shí)別,并自動(dòng)或手動(dòng)鎖定跟蹤人、車、船等目標(biāo)。山西國(guó)產(chǎn)化目標(biāo)識(shí)別開(kāi)發(fā)