甘肅RK3399處理板圖像識別模塊算法定制

來源: 發(fā)布時間:2025-04-14

城市管理的智慧化轉(zhuǎn)型是智慧城市建設(shè)的重要部分。隨著無人機的廣泛應(yīng)用,一個由人、機組合的智慧化無人機綜合監(jiān)管網(wǎng)絡(luò)正逐步形成,讓城市風(fēng)險無處遁形。無人機搭載吊艙起飛,能夠按照航線進(jìn)行巡飛,吊艙的智能化攝像頭能夠?qū)σ曇皟?nèi)的目標(biāo)進(jìn)行智能識別,通過數(shù)據(jù)分析向監(jiān)管發(fā)出信息,助理開展現(xiàn)場執(zhí)法行動。無人機的優(yōu)勢在于不受時空限制,全天候的巡檢不在話下。夜晚可以通過紅外傳感器形成高清成像,機動靈活的特點可以快速到達(dá)許多人工巡查不變?nèi)サ降膮^(qū)域。與傳統(tǒng)的人工巡查方法相比,有著早發(fā)現(xiàn)、早介入、快處理的優(yōu)勢,極大提升了工作效率。分別是利用RV1126開發(fā)而成的Viztra-LE026圖像處理板;甘肅RK3399處理板圖像識別模塊算法定制

圖像識別模塊

而維修機器人則能夠通過圖像識別、精細(xì)遠(yuǎn)程控制技術(shù),實現(xiàn)遠(yuǎn)程快速維修,通過加裝高性能圖像處理板,機器人能夠精細(xì)電網(wǎng)缺陷以及損壞程度,并通過攝像頭實時回傳高清畫面,工程師只需要遠(yuǎn)程操控機器人進(jìn)行修補,實現(xiàn)精細(xì)縫合。整個過程只需要極少數(shù)的人員參與,整個巡檢維修的時間能夠從7小時縮減到1小時,極大地保障了電力供應(yīng)。成都慧視光電采用RK3588開發(fā)而成的Viztra-HE030圖像處理板,具備八核處理器,采用BTB傳輸接口,擁有極強傳輸能力,成都慧視能夠憑借豐富的經(jīng)驗,快速集成開發(fā)SDI、CVBS、DVP、LVDS、cameralink等接口以及金屬外殼和散熱器。通過6.0TOPS的算力,以及豐富的接口定制,板卡能夠快速適配不同的無人機和機器人,用在我國西部電力運維領(lǐng)域,將是工程師打造智能化維護(hù)的關(guān)鍵技術(shù)。重慶邊海防圖像識別模塊目標(biāo)檢測RK3588是目前國產(chǎn)圖像處理板的性能數(shù)一數(shù)二存在。

甘肅RK3399處理板圖像識別模塊算法定制,圖像識別模塊

如今,AI已走入萬千企業(yè),其展現(xiàn)出的強大賦能作用,讓無數(shù)企業(yè)受益。尤其實在制造業(yè)中,AI能夠賦能多個領(lǐng)域,讓企業(yè)更加高效、更加節(jié)能。例如許多大型的紡織工廠,定期的機器巡檢以及對產(chǎn)品的質(zhì)檢至關(guān)重要。傳統(tǒng)模式是采用人工巡檢,大量的巡檢人員對很大程度上小小的紡織機器和產(chǎn)品進(jìn)行肉眼質(zhì)檢,雖然這種模式效率低、精度無法掌握,但也是無賴之舉。隨著AI的發(fā)展應(yīng)用,利用AI進(jìn)行質(zhì)檢,能夠彌補了這些缺陷。通過在攝像頭的基礎(chǔ)上集成具備圖像識別的AI圖像處理板、AI算法以及大數(shù)據(jù)分析技術(shù),就能夠搭建一套簡易但功能強大的AI質(zhì)檢系統(tǒng)。

而AI標(biāo)注則好很多,通過AI算法開發(fā)的基本流程,就能夠?qū)I進(jìn)行深度訓(xùn)練,讓其能夠像人眼一樣對圖像上的目標(biāo)進(jìn)行判斷分類,然后不同目標(biāo)自動框選標(biāo)注。這個工作主要是前期的模型訓(xùn)練需要大量時間,而后期的圖像標(biāo)注就很節(jié)省時間,通常情況下,一張圖片,只需要7-8ms就能夠精細(xì)標(biāo)注完成,無論圖片上的目標(biāo)數(shù)量和復(fù)雜程度,這是人工遠(yuǎn)不能及的。目前,慧視SpeedDP經(jīng)過多個版本的迭代,能夠支持YOLO系列算法以及YOLOv8算法的分割標(biāo)注,標(biāo)注的精度進(jìn)一步提升。目前我司能夠提供完整的針對于人、車、船的標(biāo)注模型,如果有其他目標(biāo)標(biāo)注的需求,則可以自行進(jìn)行針對性訓(xùn)練。毫無疑問,AI標(biāo)注的出現(xiàn)能夠為企業(yè)大量的數(shù)據(jù)標(biāo)注工作節(jié)省時間,從而節(jié)省成本。隨著AI的進(jìn)一步發(fā)展,未來傳統(tǒng)標(biāo)注的模式勢必會被完全取代。利用RK3588開發(fā)而成的Viztra-HE030圖像處理板;

甘肅RK3399處理板圖像識別模塊算法定制,圖像識別模塊

多目標(biāo)跟蹤是指在連續(xù)的圖像中,通過目標(biāo)檢測算法識別出每一幀中的目標(biāo),并在時間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會不斷發(fā)生尺度、形變、遮擋等變化,而且還會有目標(biāo)出現(xiàn)和消失的情況,再加上視頻采集端的相機所處環(huán)境可能受到外界影響導(dǎo)致抖動的情況(例如無人機高空檢測),就會給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo),所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此,成都慧視針對于多目標(biāo)檢測跟蹤抖動丟失的優(yōu)化方法是:1.改進(jìn)目標(biāo)檢測,使用更加魯棒的目標(biāo)檢測算法。2.增強特征描述,利用深度學(xué)習(xí)提取更高級別的語義特征,這些特征對于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運動模型,在算法中加入對攝像頭運動的估計,通過補償攝像頭運動來減小目標(biāo)真實運動與預(yù)測之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略,設(shè)計更靈活的數(shù)據(jù)關(guān)聯(lián)算法,允許更大的距離閾值來匹配候選目標(biāo)。也需要AI等算法的支持。四川低功耗圖像識別模塊板卡公司

如何提升目標(biāo)識別的精度?甘肅RK3399處理板圖像識別模塊算法定制

實現(xiàn)這些功能的技術(shù)中,圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識別的硬件能力,植入相應(yīng)的AI算法,無人機就相當(dāng)于裝上了“智慧眼”,而且這個“智慧眼”居于高空,能夠在一個定點,俯瞰大范圍,實時監(jiān)控貨物的存放狀態(tài)。遠(yuǎn)程控制技術(shù)基于網(wǎng)絡(luò)通信,通過和圖像處理板的結(jié)合,能夠?qū)崿F(xiàn)低延時低帶寬的圖像傳輸處理。在實際落地應(yīng)用中,可以采用成都慧視開發(fā)的高性能圖像處理板,其中RV1126系列的Viztra-LE026圖像處理板,就是無人機的完美搭子。這款圖像處理板具備2.0TOPS的算力,能夠根據(jù)無人機型號進(jìn)行接口定制,整體尺寸在40mm×40mm×10mm左右(核心板+接口板),小巧的外形即便是小型無人機也能夠裝上。此外,板卡整體功耗在4W左右,不會過多增加無人機的負(fù)擔(dān)。甘肅RK3399處理板圖像識別模塊算法定制