RK3588作為瑞芯微國產化旗艦級芯片,用在目標跟蹤領域,通常情況下跟蹤幀率都在50Hz左右,這已經足夠滿足大多數應用領域的需求。但在許多特殊領域,如軍備、邊防,高幀頻的視頻輸出能夠在極短的時間內捕捉到更多的畫面,實現高速動態場景的連續拍攝。高幀頻的目標跟蹤則能夠獲得更多的目標細節,便于做出下一步判斷。許多中低端性能的由于算力等因素無法達到這樣的需求,但RK3588作為性能怪,6.0TOPS的算力開發潛力無限。成都慧視就針對于這樣的需求場景,在硬件的支持下,定制開發出能夠支撐100Hz跟蹤算法,從而打造出能夠穩定實現100Hz目標跟蹤的整合方案。鳥類識別的模塊定制。浙江移動目標識別
瑞芯微推出的RK3588系列圖像處理板作為國產化板卡的性能前列,成為了各領域研究開發的優先,它能在諸多行業實現目標檢測、識別以及跟蹤等功能,具有重要的研究開發價值。特別是對于高校而言,將RK3588作為課題進行研究開發,是一個不錯的選擇。但是在這些功能實現過程中,算法的能力就十分重要,如何讓算法更加精細的識別檢測例如人、車、船等目標成為首要解決的問題。要想讓AI算法更能精確的識別檢測目標,可以利用AI的深度學習能力,讓AI不斷學習這些目標的特征,從而達到精細識別的能力。這個過程,可以通過大量的數據標注,來訓練AI。但大量待標注工作,常常讓開發者頭疼。如果采用傳統方式用人工挨個挨幀標注,將會耗費大量時間精力,讓成本不可控。貴州快速目標識別遠程控制機器人AI識別模塊定制。
無人機能夠通過高空拍攝快速獲取大范圍、多角度的地面信息。但是傳統的攝像頭只能獲取視頻數據,對于許多需要進行數據分析的行業來說顯然不夠智能化,從無人機視頻數據中快速獲取提煉大量有價值的信息,不僅能夠提升工作效率,還能夠減少不小的成本支出。這就是無人機的AI識別能力。通過識別算法,在無人機工作時就對目標范圍進行AI檢測識別,從而提煉所需信息。這就需要對無人機進行智能化改造,可以在傳統無人機吊艙中植入成都慧視開發的高性能AI圖像處理板,如利用RK3588深度開發而成的Viztra-HE030圖像處理板,6.0TOPS的算力能夠快速處理無人機識別到的復雜畫面信息,這樣就有了硬件基礎,剩下的就需要對自身算法進行不斷優化提升。
多目標跟蹤是指在連續的圖像中,通過目標檢測算法識別出每一幀中的目標,并在時間上跟蹤它們的位置和狀態。但目標會不斷發生尺度、形變、遮擋等變化,而且還會有目標出現和消失的情況,再加上視頻采集端的相機所處環境可能受到外界影響導致抖動的情況(例如無人機高空檢測),就會給多目標跟蹤造成一定的困難。由于我們不能控制目標,所以只能從視頻采集端維護跟蹤的穩定性。因此,成都慧視針對于多目標檢測跟蹤抖動丟失的優化方法是:1.改進目標檢測,使用更加魯棒的目標檢測算法。2.增強特征描述,利用深度學習提取更高級別的語義特征,這些特征對于小范圍內的視角變化具有更好的不變性3.改進運動模型,在算法中加入對攝像頭運動的估計,通過補償攝像頭運動來減小目標真實運動與預測之間的差距。4.數據關聯策略,設計更靈活的數據關聯算法,允許更大的距離閾值來匹配候選目標。打造一套穩定的識別模塊需要多久?
我國西部地區地形復雜、天氣多變,許多電網架設在高山流水之間,給電網的巡檢維護造成了不小的困難。于是,不同于傳統人工巡檢的智能化巡檢維護開始逐步應用。這種方式采用無人機加智能化機器人,其中無人機承擔巡檢工作,而智能化機器人進行維護,兩者互相配合。無人機搭載智能化吊艙,吊艙內置圖像識別傳感器,工程師可以通過遠程識別、抵近觀察等方式,找出問題所在。無人機機動性靈活性十足,能夠便捷去到許多人工難以到達的區域,巡檢無死角。無人機巡檢一次能夠抵得上三個人工同時作業,效率成倍提升。可見光AI識別模塊定制。江蘇省時省力目標識別解決方案
高性能的AI識別模塊選成都慧視光電開發的Viztra-HE030.浙江移動目標識別
實現這些功能的技術中,圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識別的硬件能力,植入相應的AI算法,無人機就相當于裝上了“智慧眼”,而且這個“智慧眼”居于高空,能夠在一個定點,俯瞰大范圍,實時監控貨物的存放狀態。遠程控制技術基于網絡通信,通過和圖像處理板的結合,能夠實現低延時低帶寬的圖像傳輸處理。在實際落地應用中,可以采用成都慧視開發的高性能圖像處理板,其中RV1126系列的Viztra-LE026圖像處理板,就是無人機的完美搭子。這款圖像處理板具備2.0TOPS的算力,能夠根據無人機型號進行接口定制,整體尺寸在40mm×40mm×10mm左右(核心板+接口板),小巧的外形即便是小型無人機也能夠裝上。此外,板卡整體功耗在4W左右,不會過多增加無人機的負擔。浙江移動目標識別