資料介紹
目標跟蹤作為計算機視覺的一個極具挑戰性的研究任務,已被廣泛的應用在人機交互、智能監控、醫學圖像處理等領域中。目標跟蹤的本質是在圖像序列中識別出目標的同時對其進行精確定位。為了克服噪聲、遮擋、背景的改變等對目標識別帶來的困難,出現了很多的跟蹤算法。
因為目標跟蹤算法需要處理的數據量大、運算復雜,需要性能強大的處理器才能實時處理。我們選用TI推出的最新產品TMS320DM6446實現算法。TMS320DM6446是一款高度集成的片上系統,集成了可以運行頻率高達594MHz的C64x+ DSP核和297MHz的ARM926處理器核。另外它還集成了數字視頻所需的許多外部組件,如視頻加速器,網絡外設及高速外部存儲接口。本設計充分利用DM6446的強大運算能力,在DSP內核上實時運行目標跟蹤算法。 設計還在ARM處理器上執行多線程應用程序,負責視頻采集,顯示,網絡通信,外圍器件控制等工作。
算法介紹
本系統實現的視頻跟蹤算法可參考文獻[1]-[5],整個算法分為基本算法和改進算法兩部分。本算法是一種基于模板匹配技術的跟蹤算法,即在手工選定或自動選定了待跟蹤目標后,提取目標的外觀信息作為模板,在后續的視頻序列中,將候選圖像區域與目標模板進行匹配,將最相似的圖像區域作為運動目標當前的位置。在本文中,采用結構相似度,即“歸一化互相關系數”作為候選區域與目標模板相似程度的度量標準,其計算公式如下所示:

上式中,f(m,n)和g(m,n)分別為目標模板和候選區域的灰度值矩陣,尺寸為MxN。uf和ug分別為目標模板和候選區域的灰度平均值,然后再求出f(m,n)和g(m,n)的協方差、f(m,n)的方差、g(m,n)的方差后,求出歸一化互相關系數。式(1)通過從灰度值矩陣中減去灰度均值,有效地消除了光照給跟蹤結果帶來的影響。而對于匹配圖像區域的搜索,為了達到減少匹配次數從而降低計算量的目的,我們借鑒了視頻壓縮領域中的三步搜索法(Three Step Search, TSS) 作為最匹配點的搜索算法[2]。
為了增加模板匹配視頻目標跟蹤算法的魯棒性,我們在基本算法的基礎上實現了改進算法的部分。改進算法具有自適應遮擋處理與模板漂移抑制的能力,能夠很好地解決前面提到模板匹配的視頻目標跟蹤算法需要解決的難題。具體來說,主要有如下四點改進:(1) 抑制漂移的帶掩蔽卡爾曼外觀濾波算法(Drift-Inhibitive Masked Kalman Appearance Filter, DIMKAF ) [1][3][4] ;(2) 內容自適應漸進式遮擋分析算法(Content-Adaptive Progressive Occlusion Analysis, CAPOA)[1][5];(3) 可變掩蔽模板匹配算法(Variant-Mask Template Matching, VMTM)[1][5];(4) 局部最優匹配鑒定算法(Local Best Match Authentication, LBMA)[1]。 改進后整個算法的流程圖如下所示:

圖 1 跟蹤算法主流程圖
算法在Davinci SOC上的實現
因為目標跟蹤算法需要處理的數據量大、運算復雜,需要性能強大的處理器才能實時處理。我們選用TI推出的最新產品TMS320DM6446實現算法。TMS320DM6446是一款高度集成的片上系統,集成了可以運行頻率高達594MHz的C64x+ DSP核和297MHz的ARM926處理器核。另外它還集成了數字視頻所需的許多外部組件,如視頻加速器,網絡外設及高速外部存儲接口。本設計充分利用DM6446的強大運算能力,在DSP內核上實時運行目標跟蹤算法。 設計還在ARM處理器上執行多線程應用程序,負責視頻采集,顯示,網絡通信,外圍器件控制等工作。
算法介紹
本系統實現的視頻跟蹤算法可參考文獻[1]-[5],整個算法分為基本算法和改進算法兩部分。本算法是一種基于模板匹配技術的跟蹤算法,即在手工選定或自動選定了待跟蹤目標后,提取目標的外觀信息作為模板,在后續的視頻序列中,將候選圖像區域與目標模板進行匹配,將最相似的圖像區域作為運動目標當前的位置。在本文中,采用結構相似度,即“歸一化互相關系數”作為候選區域與目標模板相似程度的度量標準,其計算公式如下所示:

上式中,f(m,n)和g(m,n)分別為目標模板和候選區域的灰度值矩陣,尺寸為MxN。uf和ug分別為目標模板和候選區域的灰度平均值,然后再求出f(m,n)和g(m,n)的協方差、f(m,n)的方差、g(m,n)的方差后,求出歸一化互相關系數。式(1)通過從灰度值矩陣中減去灰度均值,有效地消除了光照給跟蹤結果帶來的影響。而對于匹配圖像區域的搜索,為了達到減少匹配次數從而降低計算量的目的,我們借鑒了視頻壓縮領域中的三步搜索法(Three Step Search, TSS) 作為最匹配點的搜索算法[2]。
為了增加模板匹配視頻目標跟蹤算法的魯棒性,我們在基本算法的基礎上實現了改進算法的部分。改進算法具有自適應遮擋處理與模板漂移抑制的能力,能夠很好地解決前面提到模板匹配的視頻目標跟蹤算法需要解決的難題。具體來說,主要有如下四點改進:(1) 抑制漂移的帶掩蔽卡爾曼外觀濾波算法(Drift-Inhibitive Masked Kalman Appearance Filter, DIMKAF ) [1][3][4] ;(2) 內容自適應漸進式遮擋分析算法(Content-Adaptive Progressive Occlusion Analysis, CAPOA)[1][5];(3) 可變掩蔽模板匹配算法(Variant-Mask Template Matching, VMTM)[1][5];(4) 局部最優匹配鑒定算法(Local Best Match Authentication, LBMA)[1]。 改進后整個算法的流程圖如下所示:

圖 1 跟蹤算法主流程圖
算法在Davinci SOC上的實現
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 使用DaVinci SoC的数字视频0次下载
- 基于特征融合的LCT目标跟踪算法综述11次下载
- 基于卷积特征的多伯努利视频多目标跟踪算法11次下载
- 新型基于深度学习的目标实时跟踪算法10次下载
- 如何使用FPGA实现CORDIC算法在跟踪环中的应用9次下载
- DAVINCI的5个开发原理编程教程5次下载
- 基于Davinci的嵌入式Web视频监控系统设计的详细中文资料6次下载
- 多线索融合的目标跟踪算法在DM3730上实现1次下载
- 视频监控跟踪系统2次下载
- 基于改进压缩跟踪算法的航拍视频目标跟踪系统1次下载
- Davinci的嵌入式Web视频监控系统1次下载
- DaVinci技术的3G移动视频监控系统设计与实现16次下载
- 基于模板匹配的目标跟踪算法在红外热成像跟踪技术上的应用19次下载
- 基于Davinci平台的视频应用开发27次下载
- 视频图像动态跟踪算法的设计与实现42次下载
- 视频目标跟踪从0到1,概念与方法993次阅读
- 多目标跟踪算法总结归纳3285次阅读
- 中国铁路网的Dijkstra算法实现案例1177次阅读
- 什么是片上系统soc?片上系统soc主要包括什么?2241次阅读
- 什么是片上系统SoC?1704次阅读
- 在ELF 1 开发板上实现读取摄像头视频进行目标检测1024次阅读
- 最常见的目标跟踪算法3311次阅读
- 基于深度学习的多目标跟踪算法技术13519次阅读
- SOC中采用矫正的算法8376次阅读
- 计算机视觉中有哪些经典的目标跟踪算法?6008次阅读
- 采用片上系统(SoC)技术的星载微型GNSS接收机的设计2436次阅读
- 在Zynq SoC上实现裸机(无操作系统)软件应用方案6520次阅读
- 彩色视频增强算法关键技术FPGA实现2771次阅读
- 在Zynq SoC上实现双核非对称的多进程处理模式2892次阅读
- 片上芯片SoC挑战传统测试方案2263次阅读
下載排行
本周
- 1DC電源插座圖紙
- 0.67 MB | 2次下載 | 免費
- 2AN158 GD32VW553 Wi-Fi開發指南
- 1.51MB | 2次下載 | 免費
- 3AN148 GD32VW553射頻硬件開發指南
- 2.07MB | 1次下載 | 免費
- 4AN111-LTC3219用戶指南
- 84.32KB | 次下載 | 免費
- 5AN153-用于電源系統管理的Linduino
- 1.38MB | 次下載 | 免費
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下載 | 免費
- 7SM2018E 支持可控硅調光線性恒流控制芯片
- 402.24 KB | 次下載 | 免費
- 8AN-1308: 電流檢測放大器共模階躍響應
- 545.42KB | 次下載 | 免費
本月
- 1ADI高性能電源管理解決方案
- 2.43 MB | 450次下載 | 免費
- 2免費開源CC3D飛控資料(電路圖&PCB源文件、BOM、
- 5.67 MB | 138次下載 | 1 積分
- 3基于STM32單片機智能手環心率計步器體溫顯示設計
- 0.10 MB | 130次下載 | 免費
- 4使用單片機實現七人表決器的程序和仿真資料免費下載
- 2.96 MB | 44次下載 | 免費
- 53314A函數發生器維修手冊
- 16.30 MB | 31次下載 | 免費
- 6美的電磁爐維修手冊大全
- 1.56 MB | 24次下載 | 5 積分
- 7如何正確測試電源的紋波
- 0.36 MB | 17次下載 | 免費
- 8感應筆電路圖
- 0.06 MB | 10次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935121次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420062次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191367次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73810次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評論