實現這些功能的技術中,圖像處理基于AI圖像處理板這一傳感器。板卡具備快速圖像處理識別的硬件能力,植入相應的AI算法,無人機就相當于裝上了“智慧眼”,而且這個“智慧眼”居于高空,能夠在一個定點,俯瞰大范圍,實時監控貨物的存放狀態。遠程控制技術基于網絡通信,通過和圖像處理板的結合,能夠實現低延時低帶寬的圖像傳輸處理。在實際落地應用中,可以采用成都慧視開發的高性能圖像處理板,其中RV1126系列的Viztra-LE026圖像處理板,就是無人機的完美搭子。這款圖像處理板具備2.0TOPS的算力,能夠根據無人機型號進行接口定制,整體尺寸在40mm×40mm×10mm左右(核心板+接口板),小巧的外形即便是小型無人機也能夠裝上。此外,板卡整體功耗在4W左右,不會過多增加無人機的負擔。AI算法賦能下的圖像處理板能夠進行目標識別。江蘇目標跟蹤產品
由于侵入的目標的形狀和顏色等特征是難以固定的,再加上監控的場景,即背景往往比較復雜,只利用一個單幀圖像就找出移動的目標是非常困難的。然而,目標的運動導致了其運動時間內,監控場景圖像的連續變化,所以,使用圖像序列分析往往是比較有效的,而且適合于低信噪比的情況。由于監控系統通常監控的視野比較大,系統設置的環境較為惡劣,圖像傳輸的距離較遠,從而導致圖像的信噪比不高,因此采用突出目標的方法,需要在配準的前提下進行多幀能量積累和噪聲抑制。在該技術中,要研究的問題有,相鄰的兩幅或多幅圖像之間的關系是什么關系,是簡單的圖像差的值,還是多幅之間差的最大值,還是其他的與圖像減法之間的其他函數關系,是尤其需要研究的。在研究中,研究如何差,如何自動得到差圖像的分割門限,如何減小背景和突出目標是研究的方向。貴州目標跟蹤參考價格RK3588作為慧視光電開發的全國產化工業級板卡,具備高性能、高精度的優點。
2010年以前,目標跟蹤領域大部分采用一些經典的跟蹤方法,比如Meanshift、Particle Filter和Kalman Filter,以及基于特征點的光流算法等。Meanshift方法是一種基于概率密度分布的跟蹤方法,使目標的搜索一直沿著概率梯度上升的方向,迭代收斂到概率密度分布的局部峰值上。首先Meanshift會對目標進行建模,比如利用目標的顏色分布來描述目標,然后計算目標在下一幀圖像上的概率分布,從而迭代得到局部密集的區域。Meanshift適用于目標的色彩模型和背景差異比較大的情形,早期也用于人臉跟蹤。由于Meanshift方法的快速計算,它的很多改進方法也一直適用至今。
另外,經典的跟蹤方法還有基于特征點的光流跟蹤,在目標上提取一些特征點,然后在下一幀計算這些特征點的光流匹配點,統計得到目標的位置。在跟蹤的過程中,需要不斷補充新的特征點,刪除置信度不佳的特征點,以此來適應目標在運動中的形狀變化。本質上可以認為光流跟蹤屬于用特征點的來表征目標模型的方法。在深度學習和相關濾波的跟蹤方法出現后,經典的跟蹤方法都被舍棄,這主要是因為這些經典方法無法處理和適應復雜的跟蹤變化,它們的魯棒性和準確度都被前沿的算法所超越,但是,了解它們對理解跟蹤過程是有必要的,有些方法在工程上仍然有十分重要的應用,常常被當作一種重要的輔助手段。智能化的圖像處理板還可以實現自動化的數據分析,實現降本增效。
視頻監控中的多目標跟蹤(MTT)是一項重要而富有挑戰性的任務,由于其在各個領域的潛在應用而引起了研究人員的大量關注。多目標跟蹤任務需要在每幀中單獨定位目標,這仍然是一個巨大的挑戰,因為目標的外觀會立即發生變化,并且會出現極端的遮擋。除此之外,多目標跟蹤框架需要執行多個任務,即目標檢測、軌跡估計、幀間關聯和重新識別。多目標跟蹤分為目標檢測和跟蹤兩個主要任務。為了區分組內對象,MTT算法將ID與在特定時間內保持特定于該對象的每個檢測到的對象相關聯。然后利用這些ID來生成被跟蹤對象的運動軌跡。工程師以RK3399PRO核心板為基礎進行定制開發,讓攝像頭更加智能高效,能夠輸出高清流的圖像視頻。青海目標跟蹤功能
RK3588圖像處理板是我司自主研發的目標跟蹤板,該板卡采用國產高性能CPU,搭載自研目標跟蹤及跟蹤算法。江蘇目標跟蹤產品
在周界安防領域,傳統的攝像頭有畫無聲并不具備報警功能。慧視AI圖像處理板能夠賦能監控進行AI識別,當出現可疑人物有翻越等入侵行為時,監控能夠立即鎖定跟蹤目標人物,并向安保室發出警報,安保室人員能夠通過監控的AI跟蹤鎖定找到可疑人員的移動軌跡,便于糾察。此外,針對于夜間監控的不足,慧視雙光吊艙識別裝置能夠實現晝夜成像,白天通過可見光實現區域的監控畫面,在夜晚通過紅外實現道路或者目標區域的畫面成像,使得一些光線較差的區域也能實現清晰成像,避免被可疑人員鉆空。這樣就能在小區出入口、室外路口、周界、園區活動空間、地下室以及高空拋物防控等重要區域,通過智能監控聯動,實現小區全天候、24小時可視化報警監控。通過及時預警通知,規避安全風險,實現小區的安全管理。江蘇目標跟蹤產品