99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

基于On2 VP7專有壓縮技術在網(wǎng)絡視頻中的應用研究

電子設計 ? 來源:電子產(chǎn)品世界 ? 作者:電子產(chǎn)品世界 ? 2021-03-17 14:45 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

在某個層面上,On2 科技有限公司 (On2 Technologies) 的 TrueMotion VP7 技術實現(xiàn)這一目標的方式與其它視頻編解碼器幾乎相同。它同樣采用運動補償來消除時間冗余,采用基于頻率的模塊變換來消除空間冗余,采用一個環(huán)路濾波器來處理模塊變換的方塊效應,并采用熵編碼來消除統(tǒng)計相關性。不過,On2 的VP7技術卻包含了多項使其與眾不同、脫穎而出的創(chuàng)新性技術,而且這些技術目前正在申請專利。

黃金幀 (Golden Frame)

對 On2 TrueMotion 編解碼器的新用戶而言,最令人驚喜的功能之一是黃金幀。就像其它壓縮器一樣,TrueMotion 也保留一個最新解壓的幀作為當前幀的預測器。目前的各種編解碼器中,有些保留最后幾個幀;有些則采用一個無序解壓的未來幀,然后用作預測器 (如在 B 幀之前傳輸 P 幀)。TrueMotion 編解碼器和 VP7 則特別改為保留過去任意一個解壓數(shù)據(jù)的幀。這種編解碼器能夠更新某個幀在未來任一點的任何部分。我們稱這種二級參考幀為黃金幀,并已發(fā)掘出它的眾多用途。

圖1:On2 VP7的幀類型

注:這些幀類型僅供參考。利用 VP7 入門開發(fā)工具包,,用戶可以準確控制幀何時使用或更新黃金幀或最后的幀參考緩沖器。

前景影響大

我們發(fā)現(xiàn)黃金幀的第一個用途是前景和背景視頻的分割。例如,大多數(shù)視頻會議應用中,總是有一個人在靜態(tài)的背景前面講話。這個發(fā)言人遮蔽了背景,但隨著他在座位上的移動,會顯露出局部背景。TrueMotion編解碼器利用非移動的高質(zhì)模塊來更新黃金幀,即使前景快速移動,也可以保持高質(zhì)量的背景圖像。

丟包恢復

我們還可以在丟包情況下采用黃金幀。在一般的視頻會議系統(tǒng)中,接收器在發(fā)現(xiàn)丟包時,會用信號通知發(fā)送者。發(fā)送者一接收到這個信號,就會對一個獨立于前面各幀的幀 (即‘關鍵幀’) 進行編碼來恢復。該幀由于必須從頭開始編碼,故往往非常大,這會導致視頻的播放斷斷續(xù)續(xù)。另一種情況是,這是一個低質(zhì)量的幀,看起來比周邊的幀要模糊,而且產(chǎn)生視覺干擾脈沖。

On2 的VP7視頻會議系統(tǒng)提供一個更好的選擇方案:發(fā)送者可以發(fā)送一個只涉及黃金幀的幀。我們稱之為恢復幀。由于我們不必對幀從頭開始編碼,因此可以獲得一個質(zhì)量更好而且更小的幀。

VP7恢復幀

幀0是關鍵幀

幀1到6都只根據(jù)前一個幀來構建預測器

幀7只以幀0為參考

即使幀1到6中的任何一個丟失了,VP7仍然能夠?qū)?進行解碼,因為它只以幀0為參考

圖2:利用恢復幀來處理丟包問題

視頻會議

多方視頻會議也可以采用黃金幀。在多方會議系統(tǒng)中,各個用戶的連接帶寬都不同。一般的解決方案是把帶寬減小到一個假定的最小公分母:所有用戶都以最慢的連接都能接收的速度來收取數(shù)據(jù)。

基于On2 VP7技術的系統(tǒng)則采用了一種新穎的替代方案。通過使用黃金幀、普通幀和可拋棄幀,VP7 可獲得四個級別的有限時間可調(diào)性。這意味著我們可以根據(jù)每一方的需要生成不同的比特流 (參見圖3)。這樣,會議中的高清方就不會受到較低速連接的影響。最重要的是,這種方案無需額外的CPU成本。

圖3:采樣時間可調(diào)性模式和On2 VP7

每一個比特流都需要較低的幀速率來解碼。因此,帶寬最低的用戶可以接收 5 fps 的比特流;而帶寬最大的用戶可接收全 30fps。

黃金質(zhì)量

On2 VP7技術還利用黃金幀來提高質(zhì)量。在極緩慢地移動的鏡頭或變焦中,一個周期性的高質(zhì)量黃金幀會恢復在重復應用環(huán)路濾波器或亞像素運動 (sub-pixel motion) 時所丟失的細節(jié),從而保持圖像的質(zhì)量,而結果可以相當明顯 (見圖4)。在另一些情況下,黃金幀還可作為一個良好的預測器,預測屏幕上的某些圖像何時返回到先前的位置。

豎:平均峰值信噪比 (分貝) 橫:數(shù)據(jù)率 (每秒千比特)

圖4:采用與不采用黃金幀的移動及日歷的峰值信噪比 (PSNR) 之對比

實時質(zhì)量

在最簡單的模式下,On2 VP7編碼器使用的周期數(shù)只比解碼器多 30%,但仍然保持出色的質(zhì)量。當有大量可用周期時,實時 VP7 更能夠產(chǎn)生媲美最佳離線編碼的質(zhì)量。而且,這是自動實現(xiàn)的:VP7 乘以每一個編碼幀,并自動調(diào)節(jié)其復雜性,以確保盡可能利用可用周期來獲得最佳質(zhì)量。

能夠達到這樣,是因為 TrueMotion VP7 采用了一套自適應算法adaptive algorithms) 和探試性 (heuristics) 方法。這些算法決定哪些運動向量和模式最可能產(chǎn)生最佳結果。工作良好的模式和運動向量會被探試得更頻繁,而無法產(chǎn)生好結果的模式則被完全關閉、或被禁止到這個在所有模式下的誤差超過了一個自適應閾值。這些閾值和兩次調(diào)節(jié)間的周期也都是自適應的。當VP7的壓縮速度足夠快時,閾值和探試周期增加。當VP7工作順利時,對模式的探試便更頻繁。

在VP7擁有多余時間的極端情況下,它會回復到最低和最佳模式,甚至回到允許完全搜索和速率失真優(yōu)化的某一點。在相反的極端情況下,VP7 可能在整個幀上只進行5或6次運動搜索,而每個宏模塊 (macroblock) 只檢查2或3個不同模式,就會產(chǎn)生結果。

實時模式

為了確保靜態(tài)相機的視頻會議具有出色的實時模式,On2 VP7 充分利用了預測有時是接近完美的這項特點。如果VP7 (通過運動或模式搜索) 發(fā)現(xiàn)預測器與它將進行編碼的原始幀非常匹配,它會避免進行大量工作。在這種情況下,VP7放棄了正向變換、量化、令牌化(tokenization)、逆量化、逆向變換和重組代碼等操作。唯一需要保留的是在比特流中加入一套代表所有0的令牌 (token),并直接把預測器拷貝到幀緩沖器中。如果這種情況時常發(fā)生,編碼器實際上比解碼器運行得快,故無法縮短從比特流讀取令牌的時間。

這種技術可能對感知視頻流質(zhì)量有重大的影響。它可通過忽略較小的變化 (由相機噪聲引起的波動) 來消除背景噪聲。另外,它讓編碼器把所有可用周期都集中用在包含顯著變化 (移動的部分) 的小部分視頻屏幕上。因此,觀者最關心的圖像部分,亦即發(fā)言者的面孔,將獲得最多的周期。

解碼器的復雜度

為了確保解碼速度,On2 VP7比特流采用了一種創(chuàng)新性的簡單設計。

像其它編解碼器一樣,VP7也采用了一個環(huán)內(nèi)去塊效應濾波器 (一般稱為環(huán)路濾波器),以解決模塊邊緣的方塊效應問題。這種方案在模塊邊界上運用了一個自適應的一維 (one-dimensional) 模糊/低通濾波器。VP7 的濾波器可在字符算法中單獨工作,任何可能溢出 (超出字符邊界0-255) 的中間操作都會被鉗位。這就確保了 SIMD 指令使用的最大寬度,并意味著,如果一個處理器能支持64位SIMD,則VP7的環(huán)路濾波器比相同的C操作快了將近8倍。

On2 VP7 的預測濾波器比許多其它編解碼器簡單。預測器總是由單一幀創(chuàng)建,而且在正向和后向參考幀之間絕沒有插補。如果使用了任何亞像素運動,則可在該單一幀上運用單階濾波器來完成。

簡化的熵邏輯

On2 VP7還采用了一種比其它先進編解碼器更簡單的熵 (entropy) 編碼技術。熵解碼包含了簡單的字符算法,可利用乘法或幾種查找算法進行計算。雖然VP7使用了精密的自適應內(nèi)容建模技術,但若每一比特位都根據(jù)比特流進行解析,則不適合。

靈活的解碼實現(xiàn)方案

On2 VP7的比特流劃分方法在構建快速解碼器時保留了許多選項。所有模式和運動向量信息都存儲在一個子流中;所有剩余信息則被存儲在另一個單獨的子流中。創(chuàng)建整個預測幀的工作可被分離出來,在處理器的一個單獨內(nèi)核上運行,而該處理器會分析和產(chǎn)生剩余信息供稍后重組之用。或者,VP7 解碼器可采用較傳統(tǒng)的運行方法,一次處理一個宏模塊,從一個子流中取出單個模式和運動向量,然后從另一個子流的該宏模塊中取出剩余信息。兩個極端選擇之間可進行折衷,以確保低數(shù)據(jù)率和低指令緩存失效率。

總結

由于On2的VP7專有壓縮技術具有種種優(yōu)勢,因此獲得了市場的廣泛采納。黃金幀、出色的實時質(zhì)量和解碼器的簡易性,都讓On2 VP7成為目前網(wǎng)絡視頻及未來可能應用的理想選擇。

責任編輯:gt

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 解碼器
    +關注

    關注

    9

    文章

    1178

    瀏覽量

    42016
  • 濾波器
    +關注

    關注

    162

    文章

    8139

    瀏覽量

    182149
  • 接收器
    +關注

    關注

    15

    文章

    2573

    瀏覽量

    73989
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    霍爾傳感器在直流電機轉(zhuǎn)速測量應用研究

    純分享帖,需要者可點擊附件免費獲取完整資料~~~*附件:霍爾傳感器在直流電機轉(zhuǎn)速測量應用研究.pdf【免責聲明】本文系網(wǎng)絡轉(zhuǎn)載,版權歸原作者所有。本文所用視頻、圖片、文字如涉及作品
    發(fā)表于 05-29 14:12

    基于T型電阻網(wǎng)絡的DA分析

    DA2.1電路圖2.2 原理分析利用電壓疊加定理和電阻分壓可計算分析。1、Vp8接1(VCC),Vp1-Vp7接0(GND),電路可簡化如下。顯然Vout=1/2*Vp82、
    發(fā)表于 01-12 14:38

    某學校通信工程專業(yè)畢業(yè)設計選題

    灰色關聯(lián)度的圖像邊緣檢測方法2.蟻群圖像邊緣檢測3.基于視覺機制的邊緣檢測研究4.壓縮傳感理論及其在圖像處理應用研究5.光傳送網(wǎng)若干關鍵
    發(fā)表于 02-20 14:28

    ZigBee技術在礦燈監(jiān)控應用研究

    ZigBee技術在礦燈監(jiān)控應用研究
    發(fā)表于 03-15 13:27

    DVI接口在數(shù)字電視應用研究

    的實現(xiàn)。這些對于數(shù)字電視來說都是全新應用,只有EDID和HDCP在數(shù)字電視上實現(xiàn)后,DVI接口才是真正的數(shù)字電視接口。在應用研究,針對HDCP在數(shù)字電視的適應性問題,提出了兩種方案。修改HDCP規(guī)范
    發(fā)表于 12-12 10:18

    WCDMA的關鍵技術在網(wǎng)絡規(guī)劃的應用是什么

    WCDMA的關鍵技術在網(wǎng)絡規(guī)劃的應用是什么
    發(fā)表于 05-27 06:15

    DM642在網(wǎng)絡視頻傳輸系統(tǒng)的應用

    數(shù)字信號處理器TMS320DM642在多媒體通信領域有著廣泛的應用。以利用XDAIS算法在DM642上實現(xiàn)網(wǎng)絡視頻編碼器為例,研究了DM642在網(wǎng)絡
    發(fā)表于 03-17 11:49 ?30次下載

    On2 Technologies VP8正式發(fā)布,比H.26

    On2 Technologies VP8正式發(fā)布,比H.264節(jié)省50%以上帶寬視頻壓縮解決方案廠商On2 Technologies公司現(xiàn)已推出最新的
    發(fā)表于 09-25 07:52 ?1021次閱讀

    On2為Boo-Ree Tachyon-I多媒體處理器提供視

    On2為Boo-Ree Tachyon-I多媒體處理器提供視頻播放功能 視頻壓縮解決方案的領導廠商 On2 Technologies 公司與韓國Boo-Ree多媒體公司合作,在Boo
    發(fā)表于 05-21 10:13 ?972次閱讀

    On2 Technologies將VP6視頻解碼器技術授權許

    On2 Technologies將VP6視頻解碼器技術授權許可予videantis 視頻壓縮解決方案的領導廠商
    發(fā)表于 11-11 09:08 ?817次閱讀

    實時網(wǎng)絡視頻設計方案

     由于On2VP7 專有壓縮技術具有種種優(yōu)勢,因此獲得了市場的廣泛采納。黃金幀、出色的實時質(zhì)量和解碼器的簡易性,都讓
    發(fā)表于 07-01 15:07 ?866次閱讀
    實時<b class='flag-5'>網(wǎng)絡</b><b class='flag-5'>視頻</b>設計方案

    ZigBee和GPRS技術在水文監(jiān)測系統(tǒng)應用研究

    ZigBee和GPRS技術在水文監(jiān)測系統(tǒng)應用研究
    發(fā)表于 01-08 15:31 ?10次下載

    基于UWB無線通信技術在礦井應用研究

    基于UWB無線通信技術在礦井應用研究
    發(fā)表于 11-18 09:41 ?11次下載

    SNMP在網(wǎng)絡音頻傳輸應用研究_簡獻忠

    SNMP在網(wǎng)絡音頻傳輸應用研究_簡獻忠
    發(fā)表于 03-19 11:28 ?6次下載

    高質(zhì)量實時網(wǎng)絡視頻黃金幀編解碼器的實現(xiàn)

    關鍵詞:編解碼器 , 黃金幀 , 網(wǎng)絡視頻 在某個層面上,On2 科技有限公司 (On2 Technologies) 的 TrueMotion VP
    發(fā)表于 11-09 09:38 ?461次閱讀