這種智慧化的建設(shè)就是采用圖像處理。在無人機(jī)內(nèi)部安裝圖像處理板,這些圖像處理板和相機(jī)、算法的有機(jī)結(jié)合就形成了無人機(jī)的智慧眼,有了這個(gè)智慧眼,無人機(jī)就能夠?qū)σ曇胺秶鷥?nèi)的物體進(jìn)行AI識別,從而自動完成避障、巡檢等操作。成都慧視開發(fā)的小型化圖像處理板Viztra-LE026就是專門為無人機(jī)設(shè)計(jì)的一款“智慧眼”處理器。這塊板卡采用了RV1126開發(fā)而成,具備2.0TOPS的算力,外形呈圓形化設(shè)計(jì),整體外觀大小為Ф38mm*12mm,重量只有12g,功耗不高于4W,用在無人機(jī)領(lǐng)域具有功耗低、尺寸小的優(yōu)勢,不會過多占用和消耗無人機(jī)的內(nèi)部空間和續(xù)航。Viztra-LE034是采用RV1126開發(fā)而成的AI識別模塊。重慶軍品級圖像識別模塊器
騰訊開發(fā)的機(jī)器人小五,采用輪、腿、足復(fù)合設(shè)計(jì),使得它具備越障能力的同時(shí),也保持了輪式機(jī)器人的運(yùn)行效率。每條腿都可以單獨(dú)伸長縮短,能有效提升承載能力。裝上了雙編碼器大扭矩密度的執(zhí)行器后,就能承受住一般成年人的重量。將機(jī)器人用于養(yǎng)老服務(wù)領(lǐng)域,能夠幫老人取快遞,抱老人起床,帶老人進(jìn)行活動。機(jī)器人內(nèi)置RGBD相機(jī),在圖像處理板的賦能下,能夠?qū)崟r(shí)檢測周邊環(huán)境,進(jìn)行路線規(guī)劃和避障,以高效完成各項(xiàng)工作指令。同時(shí)能夠?qū)ξ矬w進(jìn)行AI識別,判斷老人位置、行為動作,為老人的行動做出幫助。貴州算法防抖圖像識別模塊定制方案鳥類識別的模塊定制。
目標(biāo)識別算法是一種深度學(xué)習(xí)算法,其聰明程度需要我們不斷訓(xùn)練,這就得益于大量的圖像標(biāo)注,通過對車輛行駛環(huán)境的數(shù)據(jù)集的大量標(biāo)注,能夠讓AI更加聰明,標(biāo)注得越多,識別的精度就可能越高。但是大量的圖像標(biāo)注跟工作顯然會耗費(fèi)大量的時(shí)間精力。而慧視SpeedDP的出現(xiàn)很好地解決了這個(gè)問題。SpeedDP是一個(gè)深度學(xué)習(xí)AI算法訓(xùn)練開發(fā)平臺,他能夠通過現(xiàn)有的算法模型或者自訓(xùn)練一個(gè)算法模型,實(shí)現(xiàn)對新數(shù)據(jù)集的快速AI自動標(biāo)注,以此反復(fù),幫助使用者提升算法性能。能夠有效節(jié)約大量的時(shí)間。
食品安全關(guān)乎人民的身體健康和生命安全,是民生大事。在食品生產(chǎn)與流通的各個(gè)環(huán)節(jié)中,食品檢測設(shè)備發(fā)揮著不可或缺的關(guān)鍵作用,為舌尖上的安全保駕護(hù)航。從田間地頭的農(nóng)產(chǎn)品,到生產(chǎn)線上的加工食品,再到超市貨架上的各類商品,食品檢測設(shè)備猶如一位位忠誠的“衛(wèi)士”,嚴(yán)格把關(guān)。在農(nóng)業(yè)生產(chǎn)環(huán)節(jié),農(nóng)藥殘留快速檢測儀能快速、精準(zhǔn)地檢測出果蔬上殘留的農(nóng)藥成分,確保農(nóng)產(chǎn)品符合安全標(biāo)準(zhǔn),讓消費(fèi)者吃得放心。而在食品加工企業(yè),高精度的微生物檢測設(shè)備可以對食品中的細(xì)菌、霉菌等微生物指標(biāo)進(jìn)行監(jiān)測,有效預(yù)防因微生物超標(biāo)引發(fā)的食品安全問題,保障產(chǎn)品質(zhì)量。應(yīng)急無人機(jī)用AI圖像處理板選慧視光電。
但這也遇到很多難點(diǎn),通常情況下,視頻回傳的延遲大概在200ms左右,隨著大量的彈打出,視頻傳輸所需帶寬就面臨壓力,如何在通信帶寬有限的情況下,保證視頻順暢、清晰、無卡頓地傳輸,是分析改進(jìn)這個(gè)工作需要解決的前期難點(diǎn)。針對于這個(gè)問題,慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合,推出了低延遲低帶寬圖傳解決方案。在一個(gè)窄帶收發(fā)信道內(nèi),例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi),多路視頻和交互控制共用一對收發(fā)信道,信道支持?jǐn)?shù)據(jù)透傳,外部系統(tǒng)可以使用該信道,傳輸任意格式的數(shù)據(jù);可實(shí)時(shí)調(diào)整視頻碼率,在低至500K帶寬情況下依然可以回傳清晰流暢的圖像??梢允乖O(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實(shí)現(xiàn)視頻中繼轉(zhuǎn)發(fā);能夠基于H265實(shí)時(shí)視頻編碼;可實(shí)現(xiàn)基于視頻流的“人在回路低延遲控制”。基于普通60幀相機(jī),實(shí)現(xiàn)15ms的低延遲編解碼,加上數(shù)據(jù)鏈傳輸延遲時(shí)間在30ms左右,目前業(yè)界前列。通用性強(qiáng),使用更加靈活,適用更多應(yīng)用場景;支持多路SDI視頻在低至500K帶寬情況下的同時(shí)傳輸(1080P60FPS),徹底解決“帶寬苦惱”;整體時(shí)延約60ms(含相機(jī)、編解碼、顯示,不含傳輸),實(shí)現(xiàn)實(shí)時(shí)控制、實(shí)時(shí)打擊。 HDMI相機(jī)目標(biāo)識別用圖像處理板。圖形圖像識別模塊軟件
各類船只識別的模塊定制。重慶軍品級圖像識別模塊器
慧視SpeedDP開發(fā)平臺主要提供目標(biāo)檢測算法的開發(fā)功能,不同的用戶可針對自己的業(yè)務(wù)場景進(jìn)行AI算法的定制化開發(fā)以及算法模型的快速迭代優(yōu)化。平臺自應(yīng)用以來,成功迭代了三個(gè)版本,目前已經(jīng)完全支撐YOLO系列算法的目標(biāo)檢測識別,包括YOLOv8的分割算法。用戶可以通過大量的模型訓(xùn)練實(shí)現(xiàn)自己想要的類型的目標(biāo)檢測標(biāo)注。但是這都是基于瑞芯微平臺,就出現(xiàn)了大量受限。隨著華為海思芯片重新進(jìn)入“舞臺”,許多企業(yè)也是開始選擇海思芯片作為項(xiàng)目開發(fā)的主芯片,為了應(yīng)對這樣的市場需求,慧視算法工程師也正式實(shí)現(xiàn)對SpeedDP在海思平臺的部署應(yīng)用。為使用者提供AI自動標(biāo)注的服務(wù)。重慶軍品級圖像識別模塊器