多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo),并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化,而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況(例如無人機(jī)高空檢測(cè)),就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述,利用深度學(xué)習(xí)提取更高級(jí)別的語(yǔ)義特征,這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型,在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì),通過補(bǔ)償攝像頭運(yùn)動(dòng)來減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來匹配候選目標(biāo)。RK3588是目前國(guó)產(chǎn)圖像處理板的性能數(shù)一數(shù)二存在。四川RK3399Pro開發(fā)板圖像識(shí)別模塊電子元器件
目標(biāo)識(shí)別算法是一種深度學(xué)習(xí)算法,其聰明程度需要我們不斷訓(xùn)練,這就得益于大量的圖像標(biāo)注,通過對(duì)車輛行駛環(huán)境的數(shù)據(jù)集的大量標(biāo)注,能夠讓AI更加聰明,標(biāo)注得越多,識(shí)別的精度就可能越高。但是大量的圖像標(biāo)注跟工作顯然會(huì)耗費(fèi)大量的時(shí)間精力。而慧視SpeedDP的出現(xiàn)很好地解決了這個(gè)問題。SpeedDP是一個(gè)深度學(xué)習(xí)AI算法訓(xùn)練開發(fā)平臺(tái),他能夠通過現(xiàn)有的算法模型或者自訓(xùn)練一個(gè)算法模型,實(shí)現(xiàn)對(duì)新數(shù)據(jù)集的快速AI自動(dòng)標(biāo)注,以此反復(fù),幫助使用者提升算法性能。能夠有效節(jié)約大量的時(shí)間。四川RK3399Pro開發(fā)板圖像識(shí)別模塊電子元器件成都慧視利用RK3588芯片打造了一個(gè)高性能的Viztra-HE030圖像處理板。
無人機(jī)搭載如光電吊艙等帶有攝像頭的設(shè)備后,達(dá)到了實(shí)現(xiàn)智能識(shí)別的硬件條件,但是傳統(tǒng)的攝像頭只能獲取圖像,并不具備AI識(shí)別的功能。無人機(jī)AI識(shí)別算法主要還是在于模仿人眼一樣進(jìn)行視覺處理,然后AI進(jìn)行智能提取和分析圖像,再和訓(xùn)練模型進(jìn)行快速比對(duì),從而在無人機(jī)快速飛行的過程中做到實(shí)時(shí)目標(biāo)識(shí)別。首先,要想實(shí)現(xiàn)目標(biāo)識(shí)別需要的硬件支持就是AI圖像處理板。圖像處理板通過算法的賦能,就能夠?qū)δ繕?biāo)區(qū)域的物體進(jìn)行AI識(shí)別分析,從而做出判斷。由于無人機(jī)作業(yè)的環(huán)境復(fù)雜,因此對(duì)于圖像處理板的要求需要進(jìn)一步提升。成都慧視開發(fā)的Viztra-HE030圖像處理板,采用了工業(yè)級(jí)芯片RK3588,采用先進(jìn)架構(gòu),8核(4大4?。┨幚恚懔δ軌蜻_(dá)到6.0TOPS。同時(shí),慧視光電能夠根據(jù)需求環(huán)境定制豐富的輸出接口。
無人機(jī)是巡檢領(lǐng)域的空中巡檢員,搭載智慧“眼”的無人機(jī)能夠替代人工,實(shí)現(xiàn)自主巡檢。無人機(jī)可以搭載紅外光和可見光兩種傳感器,實(shí)現(xiàn)晝夜巡檢也不是夢(mèng),一基桿塔*用十分鐘的時(shí)間便可完成巡檢工作。例如在電力巡檢中,傳統(tǒng)模式下,工人只能采用望遠(yuǎn)鏡遠(yuǎn)程查看線路,不僅費(fèi)眼睛,還費(fèi)時(shí)間。同時(shí),由于光線等外界因素的干擾,缺陷的確認(rèn)也加大了難度,不得不背著安全帶近距離校驗(yàn),工人的安全也受到威脅。而無人機(jī)則可以在發(fā)現(xiàn)缺陷后,通過抵近觀察的方式進(jìn)行仔細(xì)查看,收集缺陷周圍360°照片回去分析,不僅安全也高效率。無人機(jī)目標(biāo)跟蹤算法哪里有?
無人機(jī)在農(nóng)業(yè)領(lǐng)域能夠?qū)崿F(xiàn)高效率的施肥、播種等操作。但是不同的作業(yè)環(huán)境對(duì)于無人機(jī)的工作性能要求不一樣,同樣的方案在平原地區(qū)適用,在高原地區(qū)就不行。因此針對(duì)于特殊作業(yè)環(huán)境需要制定不同的智慧化方案。像青藏高原這樣地貌復(fù)雜、低氣壓、大溫差的特點(diǎn),參與智能化工作的各個(gè)部件需要符合這樣作業(yè)環(huán)境特點(diǎn)的性能要求。不比平原的一馬平川,高原由于環(huán)境復(fù)雜,地形起伏對(duì)于無人機(jī)的飛行也需要進(jìn)行控制,無論是高度還是速度甚至距離都需要進(jìn)行嚴(yán)格限制,防止出現(xiàn)撞機(jī)等事故。因此,這個(gè)方面的智慧化建設(shè)就需要無人機(jī)具備智能避障的功能,無人機(jī)需要在高速度或者遠(yuǎn)距離的情況下識(shí)別樹木、電線桿、石頭等障礙物,并能夠?qū)崿F(xiàn)避障。如何選擇合適的圖像處理板性能?河南智慧交通圖像識(shí)別模塊專業(yè)團(tuán)隊(duì)
成都慧視利用RV1126芯片打造了一個(gè)高性能的Viztra-LE026圖像處理板。四川RK3399Pro開發(fā)板圖像識(shí)別模塊電子元器件
識(shí)別算法的性能提升依靠大量的圖像標(biāo)注,傳統(tǒng)模式下,需要人工對(duì)同一識(shí)別目標(biāo)的數(shù)據(jù)集進(jìn)行一步一步手動(dòng)拉框,但是這個(gè)過程的痛苦只有做過的人才知道。越多素材的數(shù)據(jù)集對(duì)于算法的提升越有幫助,常規(guī)情況下,一個(gè)20秒時(shí)長(zhǎng)30幀的視頻就多達(dá)兩三百?gòu)埉嬅嫘枰獦?biāo)注,如果視頻時(shí)長(zhǎng)或者視頻的幀速率增加,需要標(biāo)注的幀畫面將會(huì)更多。小編曾試過標(biāo)注一個(gè)時(shí)長(zhǎng)為1分30秒幀速率為60的視頻,需要標(biāo)注的畫面竟然多達(dá)5000多張,當(dāng)我標(biāo)注到500張的時(shí)候,整個(gè)人都已經(jīng)麻木,并且出現(xiàn)情緒波動(dòng),望著剩下的4500多張待標(biāo)注畫面,看著都頭皮發(fā)麻,怎么都不想繼續(xù)了。四川RK3399Pro開發(fā)板圖像識(shí)別模塊電子元器件