重慶穩(wěn)定目標(biāo)識(shí)別工具

在如今的作業(yè)中，無(wú)人機(jī)路面巡查替代傳統(tǒng)的人工巡查，展現(xiàn)出巨大的效率優(yōu)勢(shì)。像高速施工工地這樣的環(huán)境下，施工方為了保障施工安全，就需要對(duì)施工范圍進(jìn)行嚴(yán)格管控，傳統(tǒng)的人工巡查效率低，受限于地形、時(shí)間等問(wèn)題，容易出現(xiàn)盲點(diǎn)。相比人工，利用無(wú)人機(jī)進(jìn)行AI識(shí)別則可以逐幀圖像監(jiān)測(cè)，即便是夜晚也能夠利用紅外傳感器進(jìn)行數(shù)據(jù)收集，幾乎不會(huì)遺漏任何信息。而交通管理部門，則可以利用無(wú)人機(jī)快速到底事故地點(diǎn)進(jìn)行疏導(dǎo)，緩解交通壓力。紅外AI識(shí)別模塊定制選擇成都慧視。重慶穩(wěn)定目標(biāo)識(shí)別工具

但這也遇到很多難點(diǎn)，通常情況下，視頻回傳的延遲大概在200ms左右，隨著大量的彈打出，視頻傳輸所需帶寬就面臨壓力，如何在通信帶寬有限的情況下，保證視頻順暢、清晰、無(wú)卡頓地傳輸，是分析改進(jìn)這個(gè)工作需要解決的前期難點(diǎn)。針對(duì)于這個(gè)問(wèn)題，慧視光電利用GS弱網(wǎng)高清音視頻傳輸系統(tǒng)和RK3588打造的Viztra-HE030圖像處理板結(jié)合，推出了低延遲低帶寬圖傳解決方案。在一個(gè)窄帶收發(fā)信道內(nèi)，例如在信道有效帶寬0.5Mb/s~2Mb/s內(nèi)，多路視頻和交互控制共用一對(duì)收發(fā)信道，信道支持?jǐn)?shù)據(jù)透?jìng)?，外部系統(tǒng)可以使用該信道，傳輸任意格式的數(shù)據(jù)；可實(shí)時(shí)調(diào)整視頻碼率，在低至500K帶寬情況下依然可以回傳清晰流暢的圖像?？梢允乖O(shè)備飛的更遠(yuǎn)、走的更遠(yuǎn);可實(shí)現(xiàn)視頻中繼轉(zhuǎn)發(fā)；能夠基于H265實(shí)時(shí)視頻編碼；可實(shí)現(xiàn)基于視頻流的“人在回路低延遲控制”?；谄胀?0幀相機(jī)，實(shí)現(xiàn)15ms的低延遲編解碼，加上數(shù)據(jù)鏈傳輸延遲時(shí)間在30ms左右，目前業(yè)界前列。通用性強(qiáng)，使用更加靈活，適用更多應(yīng)用場(chǎng)景；支持多路SDI視頻在低至500K帶寬情況下的同時(shí)傳輸（1080P60FPS），徹底解決“帶寬苦惱”；整體時(shí)延約60ms（含相機(jī)、編解碼、顯示，不含傳輸），實(shí)現(xiàn)實(shí)時(shí)控制、實(shí)時(shí)打擊。廣東網(wǎng)絡(luò)目標(biāo)識(shí)別定制機(jī)器狗AI識(shí)別模塊定制。

多邊形標(biāo)注能夠能夠幫助我們標(biāo)注一些規(guī)則復(fù)雜的物體，如動(dòng)物、人、車、建筑物等，與矩形標(biāo)注框等方法相比，多邊形標(biāo)注更能精確展示被標(biāo)注物體的形狀、大小以及實(shí)時(shí)形態(tài)，通過(guò)大量的多邊形標(biāo)注工作，能夠更好的幫助我們提高算法模型的準(zhǔn)確性和魯棒性。傳統(tǒng)的多邊形標(biāo)注方法中，標(biāo)注者需要在物體的邊緣上依次單擊鼠標(biāo)或使用繪圖工具，將點(diǎn)連接起來(lái)形成一個(gè)封閉的多邊形。標(biāo)注的難度取決于被標(biāo)注物體的復(fù)雜程度，相較于矩形框標(biāo)注更加費(fèi)時(shí)費(fèi)力，如果遇到大量待標(biāo)注目標(biāo)，則極大地影響工作效率。

首先攝像機(jī)采用的是可見(jiàn)光高清攝像機(jī)，具備1920*1080的分辨率，系統(tǒng)視場(chǎng)31.11°×17.8°，其中搜索視場(chǎng)15.8°×15.8°（1080P像素）。而圖像處理則采用慧視開發(fā)的RV1126高性能圖像處理板，之所以采用這塊板卡，一方面得益于其低功耗、微型外觀的設(shè)計(jì)，非常契合“智慧眼”這樣對(duì)于空間要求嚴(yán)格的應(yīng)用場(chǎng)景；另一方面RV1126具備2.0TOPS的算力，在國(guó)產(chǎn)化方面也十分完整，安全性十足。兩者結(jié)合，就能夠形成重量不超過(guò)100g的“智慧眼”。在算法的作用下，能夠達(dá)到≥50Hz的跟蹤幀率，≥25Hz的檢測(cè)幀率，實(shí)現(xiàn)捕獲4m*4m目標(biāo)超過(guò)800m、6m*6m目標(biāo)超過(guò)1000m。這就是“機(jī)器狼”的智慧化措施，通過(guò)一個(gè)“小小的”“智慧眼”的加入，便能夠讓其實(shí)現(xiàn)許多自動(dòng)化任務(wù)。隨著技術(shù)的不斷發(fā)展，“機(jī)器狼”的形態(tài)將會(huì)不斷進(jìn)步，滿足更多多樣化需求。各類飛行器識(shí)別的模塊定制。

RK3588作為瑞芯微旗艦級(jí)芯片，工業(yè)級(jí)的算力受到了很多領(lǐng)域的青睞，但是由于前端相機(jī)的選擇不同，并不是每塊RK3588的圖像處理板都可以直接拿來(lái)使用，需要的是根據(jù)相機(jī)接口和應(yīng)用場(chǎng)景進(jìn)行深度定制。成都慧視光電技術(shù)有限公司就有這樣的快速集成定制的能力。作為擁有多年圖像處理板開發(fā)經(jīng)驗(yàn)的團(tuán)隊(duì)，成都慧視能夠快速定制SDI、CVBS、CAMERALINK、USB、LVDS、DVP等豐富接口的RK3588系列圖像處理板，并能夠根據(jù)應(yīng)用環(huán)境定制外殼、散熱器等。無(wú)人機(jī)吊艙用AI識(shí)別模塊定制。國(guó)產(chǎn)化目標(biāo)識(shí)別開發(fā)

Viztra-HE030是采用RK3588開發(fā)而成的AI識(shí)別模塊。重慶穩(wěn)定目標(biāo)識(shí)別工具

多目標(biāo)跟蹤是指在連續(xù)的圖像中，通過(guò)目標(biāo)檢測(cè)算法識(shí)別出每一幀中的目標(biāo)，并在時(shí)間上跟蹤它們的位置和狀態(tài)。但目標(biāo)會(huì)不斷發(fā)生尺度、形變、遮擋等變化，而且還會(huì)有目標(biāo)出現(xiàn)和消失的情況，再加上視頻采集端的相機(jī)所處環(huán)境可能受到外界影響導(dǎo)致抖動(dòng)的情況（例如無(wú)人機(jī)高空檢測(cè)），就會(huì)給多目標(biāo)跟蹤造成一定的困難。由于我們不能控制目標(biāo)，所以只能從視頻采集端維護(hù)跟蹤的穩(wěn)定性。因此，成都慧視針對(duì)于多目標(biāo)檢測(cè)跟蹤抖動(dòng)丟失的優(yōu)化方法是：1.改進(jìn)目標(biāo)檢測(cè),使用更加魯棒的目標(biāo)檢測(cè)算法。2.增強(qiáng)特征描述，利用深度學(xué)習(xí)提取更高級(jí)別的語(yǔ)義特征，這些特征對(duì)于小范圍內(nèi)的視角變化具有更好的不變性3.改進(jìn)運(yùn)動(dòng)模型，在算法中加入對(duì)攝像頭運(yùn)動(dòng)的估計(jì)，通過(guò)補(bǔ)償攝像頭運(yùn)動(dòng)來(lái)減小目標(biāo)真實(shí)運(yùn)動(dòng)與預(yù)測(cè)之間的差距。4.數(shù)據(jù)關(guān)聯(lián)策略，設(shè)計(jì)更靈活的數(shù)據(jù)關(guān)聯(lián)算法，允許更大的距離閾值來(lái)匹配候選目標(biāo)。重慶穩(wěn)定目標(biāo)識(shí)別工具