作者:張亞男,耿國華,周明全,朱新懿 來源:計算機應用
隨著無線多媒體應用的出現和多數據服務的繁殖,無線服務被廣泛的應用到各個方面,在多媒體通訊中利用無線網絡傳輸音頻和視頻信息變得更加重要。這就要求在多媒體信息處理中能夠動態地、實時地處理聲音、動畫以及視頻信號,但是計算機難以實時地從存儲器中將圖像信息處理過程中產生的海量數據傳送到中央處理器,因此如果不對視頻數據進行壓縮處理,要達到實時性的要求幾乎是不可能的。這就要求在易產生誤碼的無線環境中實現安全的低碼率編碼和傳輸,MPEG-4技術為此提供了實現的可能。
MPEG-4圖像壓縮技術針對一定比特率下的視頻、音頻編碼,強調了基于內容的交互性。因此,利用MPEG-4編碼解碼技術來實現視頻數據壓縮也就成為多媒體系統開發中進行無線視頻傳輸的關鍵技術。多媒體視頻會議系統是計算機技術與通信技術相結合的產物,它通過多媒體技術和通信技術的支持為跨地區的人們提供了一個相互交流、討論問題和協同工作(CSCW)的環境,并產生“你見即我見”的效果。
多媒體視頻會議系統將大大提高人們的工作效率,并將改變人們傳統的工作和交流模式,具有深遠而又深刻的社會意義。視頻醫療系統是多媒體視頻會議系
統的一個嶄新的應用領域。在視頻醫療系統中,由JMF (JavaMedia Framework)提供一個統一的架構和通信協議來管理基于時間媒體的獲取、處理和傳輸。采用實時傳輸協議/實時傳輸控制協議(RTP /RTCP)很好的保證了視頻傳輸過程中的實時性,并在JMF中引入了MPEG-4壓縮算法插件進行視頻壓縮。MPEG-4壓縮算法壓縮比高,并且具有良好的網絡適應性。在程序實現過程中效果良好。
1 MPEG-4關鍵技術
MPEG-4采用了基于對象第二代壓縮編碼技術,并使用AV對象(Audio /VisualObject)進行的可視化編碼,同時提供了許多基于內容的交互性視頻服務功能,也支持傳統的流視頻。MPEG-4除了利用第一代視頻編碼的核心技術(如運動估計與補償、熵編碼)外,還提出了一些新的關鍵技術:
1) 視頻對象分割MPEG-4的基于內容的交互性最主要是通過對視頻對象的分割實現的。所謂的視頻對象分割,就是將視頻、圖像分割成不同的對象或是將運動對象從背景中分離出來,進而對不同的對象采用不同的編碼方法來實現高效壓縮,比如對運動對象采用壓縮比較低、損失較小的方法,盡可能保留視頻對象的細節和平滑性;對背景對象采用大壓縮比的編碼策略,以取得壓縮效率和解碼圖像之間的較好的平衡。基本可以分為三步:通過濾波對圖像數據進行簡化;對視頻、圖像數據進行特征提取,比如顏色、紋理、運動、語義等特征;最后是相關的后處理操作,以達到去噪和準確提取邊界的目的。
由此可見,MPEG-4編碼技術要求對圖像以及視頻作出更多的分析理解,而不同于過去的壓縮算法,只是去掉了幀內和幀間的冗余。因此基于對象的編碼可以提高數據的壓縮比,視頻對象的分割(提取)技術也成為MPEG-4視頻編碼中的關鍵技術。
2) 視頻編碼可分級技術視頻分級編碼技術的目的是解決在不同傳輸特性的異構網絡上進行視頻傳輸的需要。視頻編碼的可分級性,指的是碼率的可調整性。也就是說,視頻編碼只壓縮一次,卻可以以多個幀率、空間分辨率或視頻質量來進行解碼,從而支持不同用戶的不同應用需求。視頻編碼的分級技術是通過視頻對象層(VOL)的數據結構來實現的。有兩種基本的分級工具,分別是時域分級和空域分級,同時也支持時域空域的混合分級。每一級編碼至少有兩層的VOL,低層(基本層)用來提供視頻序列的基本信息,高層(增強層)用來提供視頻序列的更高的分辨率和細節。
3) 運動估計與補償技術在視頻編碼中,運動估計相當耗時,對編碼的實時性影響很大。在運動估計部分,必須通過反復計算,以確定鄰近幀中宏模塊的相關性。通常使用塊匹配準則進行估計,比如絕對誤差和( SAD)準則和均方差(MSE)準則,來選擇進行一種最佳匹配操作來產生最佳匹配點的運動估計。例如,可以通過開發MPEG-4 專用的適應再同步、數據分割和數據恢復的句法單元來優化比特流,使其具有固定容錯能力。在大多數情況下,高壓縮比的視頻數據無法避免由信道退化帶來的誤碼影響。然而,只要通過采用一系列適當的方法和工具來減小誤碼的影響,高質量的無線視頻傳輸是完全可能實現的。
2 MPEG-4技術的應用———視頻醫療系統
通過以上對MPEG-4視頻編碼的關鍵技術的分析,可以看出, MPEG-4視頻編碼在視頻傳輸方面有其獨特的優點: (1)基于內容的交互性; (2)高效的編碼方法; (3)通用的訪問性。
將視頻會議系統應用于醫療過程的視頻醫療系統是視頻會議的一個新的應用領域。在視頻醫療系統中,可以采用點對點或點對多點的應用形式來進行一對一的診療以及專家會診,還可以進行醫療教學實踐等。視頻系統主要具有視頻的實時采集、同步壓縮、實時傳輸及回放的功能。也就是說在傳送本地視頻的同時,可以回放并監控本地的視頻信息,另外還提供視頻的快照及存儲功能。圖1即為系統的結構模型圖。
從圖1可以看出,在視頻醫療系統中,基于MPEG-4進行的視頻采集及壓縮是關鍵步驟。在視頻醫療系統的設計過程中,由于軟件的視頻壓縮算法極為耗時,因此為了提高壓縮效率,在JMF 中引入了MPEG-4 壓縮算法插件, 采用了基于MPEG-4的視頻采集及傳輸技術來進行視頻壓縮,同時輔以雙緩沖和多線程等技術。
視頻對象的交互和編解碼的一個重要前提就是利用視頻對象的分割技術,通過運動估計和補償技術得到一個基于運動信息和視覺特性的跟蹤,并最終得到視頻對象的跟蹤結果。在視頻采集線程將采集到的每一幀視頻圖像分別存放到視頻源緩沖區1和視頻源緩沖區2中,然后通過軟件壓縮線程對頻源緩沖區1和視頻源緩沖區2中的圖像進行壓縮,并將壓縮后的結果分別保存到壓縮視頻緩沖區1和壓縮視頻緩沖區2中。在兩個視頻源緩沖區中至少
有一個為空時,視頻采集線程將繼續進行圖像的采集工作;同樣的,當視頻源緩沖區至少有一個為滿,并且壓縮視頻緩沖區至少有一個為空時,軟件壓縮線程才進行壓縮。所有經過壓縮的視頻數據的線程按隊列進行排列,它們可以同時使用非空的壓縮視頻緩沖區的數據。當最后一個線程使用完壓縮視頻緩沖區后,將向視頻采集線程發出采集下一幀的命令。從緩沖區中取出數據并將緩沖區狀態置為空,向緩沖區中放入數據時則將緩沖區的狀態置為滿。而MPEG-4視頻編碼的可分級技術則使視頻在具有不同傳輸特性的異構網絡上的傳輸得到了實現。
MPEG4壓縮算法壓縮比高,并且具有很好的網絡適應性。在使用MPEG-4壓縮算法的同時采用雙緩沖和多線程等技術,可以使得圖像的采集、壓縮和傳輸并發執行,大大提高CPU的使用效率,使視頻采集、壓縮和傳輸的整體性能得到很大的提高。
視頻采集壓縮的流程圖如圖2所示。
經過視頻采集壓縮后獲取的圖像如圖3。
3 結語
由于MPEG-4的可量測性和柔韌性以及寬帶無線網絡的出現,可以預見到在不久的將來無線多媒體服務將成為時代的潮流。寬帶無線網絡中的MPEG-4視頻傳輸將成為不斷出現的多媒體應用的一個重要組成部分。MPEG-4的低存儲容量和高清晰度的特點,決定了MPEG-4在低帶寬網絡成為一種優越的視頻壓縮方式。由此可以看出,在視頻醫療系統中進行視頻壓縮時,使用基于MPEG-4壓縮算法的插件進行的一對一的視頻傳輸,可以獲得質量較高的視頻圖像,并且基本能夠達到系統實時性的要求,這是傳統的多點傳輸視頻系統無法做到的。
責任編輯:gt
-
處理器
+關注
關注
68文章
19259瀏覽量
229652 -
無線
+關注
關注
31文章
5450瀏覽量
173240 -
醫療
+關注
關注
8文章
1822瀏覽量
58738
發布評論請先 登錄
相關推薦
評論