99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

淺析Lyra音頻編解碼器Android開(kāi)源版本

LiveVideoStack ? 來(lái)源:LiveVideoStack ? 作者:LiveVideoStack ? 2021-04-08 16:18 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

最新消息:Google于今日發(fā)布了Lyra音頻編解碼器Android開(kāi)源版本。

據(jù)悉,開(kāi)源發(fā)布的Lyra代碼是用C++編寫(xiě)的,以提高速度、效率和互操作性,使用了帶有Abseil的Bazel構(gòu)建框架和GoogleTest框架進(jìn)行全面的單元測(cè)試。

前不久,Google推出的Lyra音頻編解碼器——是一種用于語(yǔ)音壓縮的新型超低比特率編解碼器。其在于能給在每秒3kb的網(wǎng)絡(luò)寬帶為用戶提供自然清晰的語(yǔ)音聊天,還可在僅90ms延遲的情況下在從高端云服務(wù)器到中端智能手機(jī)的任何設(shè)備上運(yùn)行。(有關(guān)Lyra的詳細(xì)介紹請(qǐng)瀏覽:在3kbps的帶寬下還能清晰地語(yǔ)音聊天?)

對(duì)此,我們查閱了Google的官方Lyra推送文章,瀏覽了文中所載的相同視頻分別在原版、Opus@6kbps和Lyra@3kbps帶寬下的音頻質(zhì)量對(duì)比(如下所示)。通過(guò)瀏覽對(duì)比,可以明確感知到Lyra在3kbps帶寬情況下,雖然比特率降低為Opus的一半,但其音頻的輸出質(zhì)量卻優(yōu)于Opus。我們著實(shí)被Lyra的音頻輸出質(zhì)量所驚艷。

因此我們聯(lián)系到了負(fù)責(zé)Lyra音頻編解碼器研發(fā)工作的產(chǎn)品經(jīng)理Jamieson Brettle以及主管工程師Jan Skoglund進(jìn)行了一次郵件采訪。雖然僅是一次簡(jiǎn)短的采訪,但是從字里行間中可以看出谷歌團(tuán)隊(duì)對(duì)Lyra音頻編解碼器的音頻生成質(zhì)量充滿了信心。

以下內(nèi)容由LiveVideoStack與Jamieson和Jan的采訪整理而成。

Q 、Lyra是如何做到在比特率低到3kbps的情況下,依然能輸出高質(zhì)量的語(yǔ)音?

首先,Lyra的目的并不是傳輸語(yǔ)音信號(hào)本身,而是提取少量的關(guān)鍵特征,使得模型可以利用這些特征來(lái)合成語(yǔ)音。這些特征可以被高度壓縮,但不會(huì)失去產(chǎn)生高質(zhì)量語(yǔ)音的能力。

Lyra是用于產(chǎn)生語(yǔ)音信號(hào)的,當(dāng)輸入信號(hào)中存在語(yǔ)音時(shí),該模型可以很好地進(jìn)行語(yǔ)音再生。

Q 、Lyra為什么以3kbps為節(jié)點(diǎn)?

其實(shí),我們的目標(biāo)是在傳輸語(yǔ)音時(shí)盡可能地少用數(shù)據(jù),并且即使在最惡劣的網(wǎng)絡(luò)條件下也能進(jìn)行實(shí)時(shí)通信。我們也都知道雖然Opus能以6kbps這么低的速率滿足在2G網(wǎng)絡(luò)上進(jìn)行通信,但是其音頻質(zhì)量卻下降了。

而我們對(duì)Lyra進(jìn)行了調(diào)整,使其能夠在一半的數(shù)據(jù)(3kbps)下工作,同時(shí)在這個(gè)非常低的比特率下可以提供比Opus更高的音頻質(zhì)量,并且能夠運(yùn)行在我們的目標(biāo)設(shè)備上。

Q 、Lyra目前的應(yīng)用范圍與具體的應(yīng)用場(chǎng)景有哪些?

目前,我們專注于確保即使在最糟糕的網(wǎng)絡(luò)狀況下Lyra也能讓用戶進(jìn)行高質(zhì)量的端對(duì)端語(yǔ)音通話。

Q 、Lyra的下一步計(jì)劃是什么?

Lyra的下一步計(jì)劃是為Android開(kāi)發(fā)一個(gè)開(kāi)源的編解碼器,并且我們將開(kāi)始關(guān)注更多的操作系統(tǒng)和硬件目標(biāo)。我們相信,我們所做的研究作為下一代音頻編解碼器的基石,可以應(yīng)用于比實(shí)時(shí)語(yǔ)音更多的用例。

由此可以看出,Lyra的目標(biāo)是幫助那些所處網(wǎng)絡(luò)狀態(tài)惡劣,2G網(wǎng)絡(luò)或有線撥號(hào)連接的用戶提供高質(zhì)量的語(yǔ)音通話,以滿足用戶對(duì)語(yǔ)音通話的最基本需求。除此之外,據(jù)悉Google團(tuán)隊(duì)還提出Lyra與AV1相結(jié)合,將比VP9的編碼效率提高了約40%,并且用戶可以通過(guò)56kbps的撥號(hào)調(diào)制解調(diào)器連接到互聯(lián)網(wǎng)實(shí)現(xiàn)視頻聊天。

但是有媒體也對(duì)此提出了質(zhì)疑:AV1與Lyra的組合對(duì)于使用2G網(wǎng)絡(luò)的手機(jī)用戶來(lái)說(shuō)是行不通的,因?yàn)檫@類手機(jī)無(wú)法支持AV1所需的處理。

對(duì)此,Google Lyra項(xiàng)目的相關(guān)負(fù)責(zé)人也有回應(yīng):Lyra并不要求用戶使用的一定是5G智能手機(jī),只是需要有一定計(jì)算能力的智能手機(jī)。在很多發(fā)展中國(guó)家市場(chǎng),我們注意到,這幾年即使是中低端手機(jī)的計(jì)算力也在快速提升。

另外,負(fù)責(zé)人還提到:在很多歐美市場(chǎng)即使是服務(wù)商無(wú)限制的數(shù)據(jù)計(jì)劃,用戶通常每個(gè)月只有1GB或2GB的高速數(shù)據(jù),之后的網(wǎng)絡(luò)速度一般會(huì)降到64kbps-128kbps, Lyra和AV1對(duì)這些用戶也會(huì)有非常有價(jià)值。

對(duì)此,僅個(gè)人認(rèn)為:有爭(zhēng)議也好,有質(zhì)疑也罷。對(duì)于一個(gè)新產(chǎn)品來(lái)說(shuō)都需要經(jīng)歷時(shí)間與實(shí)踐的打磨和積累,用戶的使用反饋,才能不斷提升。所以不要急,現(xiàn)在Lyra開(kāi)源只是剛剛開(kāi)始,我們還會(huì)持續(xù)關(guān)注。
編輯:lyn

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • Android
    +關(guān)注

    關(guān)注

    12

    文章

    3973

    瀏覽量

    130291
  • Google
    +關(guān)注

    關(guān)注

    5

    文章

    1789

    瀏覽量

    59059
  • 音頻編解碼器
    +關(guān)注

    關(guān)注

    4

    文章

    152

    瀏覽量

    56335

原文標(biāo)題:Google Lyra Android版開(kāi)源 支持3kbps語(yǔ)音聊天

文章出處:【微信號(hào):livevideostack,微信公眾號(hào):LiveVideoStack】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    Texas Instruments TAC5x42接口編解碼器數(shù)據(jù)手冊(cè)

    Texas Instruments TAC5x42接口編解碼器包括低功耗立體聲音頻模數(shù)轉(zhuǎn)換 (ADC) 和音頻數(shù)模轉(zhuǎn)換器 (DAC),集成了豐富的功能。這些支持時(shí)分復(fù)用 (TDM)、
    的頭像 發(fā)表于 07-14 14:43 ?106次閱讀
    Texas Instruments TAC5x42接口<b class='flag-5'>編解碼器</b>數(shù)據(jù)手冊(cè)

    Texas Instruments TAC5311-Q1汽車單聲道音頻編解碼器數(shù)據(jù)手冊(cè)

    Texas Instruments TAC5311-Q1汽車單聲道音頻編解碼器是一款低功耗單聲道編解碼器,具有10V~RMS ~差分輸入、104dB ADC和2V~RMS~ 差分輸出、114dB
    的頭像 發(fā)表于 07-09 15:35 ?136次閱讀
    Texas Instruments TAC5311-Q1汽車單聲道<b class='flag-5'>音頻</b><b class='flag-5'>編解碼器</b>數(shù)據(jù)手冊(cè)

    CYW20721內(nèi)置的所有編解碼器類型有哪些?

    您能告訴我們 CYW20721 內(nèi)置的所有編解碼器類型嗎? LDAC、LC3(LE 音頻)、AAC、SBC 等。
    發(fā)表于 06-27 08:03

    AI玩具爆發(fā),音頻編解碼器如何滿足語(yǔ)音交互需求

    電子發(fā)燒友網(wǎng)綜合報(bào)道,在AI玩具已經(jīng)開(kāi)始逐漸爆發(fā)的當(dāng)下,人機(jī)交互已經(jīng)成為標(biāo)配功能,而最重要的便是語(yǔ)音控制。而語(yǔ)音控制的第一步,便需要讓AI玩具聽(tīng)懂你在說(shuō)什么這就需要用到音頻編解碼器。 ? 音頻
    的頭像 發(fā)表于 06-20 01:07 ?6328次閱讀

    TWL6040 用于便攜式應(yīng)用的 8 通道高質(zhì)量低功耗音頻編解碼器數(shù)據(jù)手冊(cè)

    TWL6040 設(shè)備是具有高集成度的音頻編碼/解碼器編解碼器),可為便攜式應(yīng)用程序提供模擬音頻編解碼
    的頭像 發(fā)表于 04-27 17:52 ?434次閱讀
    TWL6040 用于便攜式應(yīng)用的 8 通道高質(zhì)量低功耗<b class='flag-5'>音頻</b><b class='flag-5'>編解碼器</b>數(shù)據(jù)手冊(cè)

    TWL6041 用于便攜式應(yīng)用的 8 通道高質(zhì)量低功耗音頻編解碼器數(shù)據(jù)手冊(cè)

    TWL6041 是一種具有高集成度的音頻編解碼器,為便攜式應(yīng)用程序提供模擬音頻編解碼器功能,如 所示。該設(shè)備包含多個(gè)音頻模擬輸入和輸出,以及
    的頭像 發(fā)表于 04-27 14:55 ?411次閱讀
    TWL6041 用于便攜式應(yīng)用的 8 通道高質(zhì)量低功耗<b class='flag-5'>音頻</b><b class='flag-5'>編解碼器</b>數(shù)據(jù)手冊(cè)

    國(guó)芯思辰| 單聲道音頻編解碼器SC2601應(yīng)用于錄音筆,替換ES8311

    國(guó)芯思辰| 單聲道音頻編解碼器SC2601應(yīng)用于錄音筆,替換ES8311
    的頭像 發(fā)表于 01-07 10:33 ?718次閱讀
    國(guó)芯思辰| 單聲道<b class='flag-5'>音頻</b><b class='flag-5'>編解碼器</b>SC2601應(yīng)用于錄音筆,替換ES8311

    TLV320AIC28音頻編解碼器評(píng)估模塊

    電子發(fā)燒友網(wǎng)站提供《TLV320AIC28音頻編解碼器評(píng)估模塊.pdf》資料免費(fèi)下載
    發(fā)表于 12-20 16:02 ?0次下載
    TLV320AIC28<b class='flag-5'>音頻</b><b class='flag-5'>編解碼器</b>評(píng)估模塊

    替換ES8311,音頻編解碼器SC2601在行車記錄儀中的應(yīng)用

    替換ES8311,音頻編解碼器SC2601在行車記錄儀中的應(yīng)用
    的頭像 發(fā)表于 11-29 10:07 ?969次閱讀
    替換ES8311,<b class='flag-5'>音頻</b><b class='flag-5'>編解碼器</b>SC2601在行車記錄儀中的應(yīng)用

    配置I2S以從編解碼器設(shè)備生成BCLK

    電子發(fā)燒友網(wǎng)站提供《配置I2S以從編解碼器設(shè)備生成BCLK.pdf》資料免費(fèi)下載
    發(fā)表于 10-21 10:30 ?0次下載
    配置I2S以從<b class='flag-5'>編解碼器</b>設(shè)備生成BCLK

    TMS320F2833x與AIC23B立體聲音頻編解碼器的接口

    電子發(fā)燒友網(wǎng)站提供《TMS320F2833x與AIC23B立體聲音頻編解碼器的接口.pdf》資料免費(fèi)下載
    發(fā)表于 10-15 09:21 ?0次下載
    TMS320F2833x與AIC23B立體聲<b class='flag-5'>音頻</b><b class='flag-5'>編解碼器</b>的接口

    Linux上的編解碼器移植TMS320DM365預(yù)覽版

    電子發(fā)燒友網(wǎng)站提供《Linux上的編解碼器移植TMS320DM365預(yù)覽版.pdf》資料免費(fèi)下載
    發(fā)表于 10-14 10:53 ?0次下載
    Linux上的<b class='flag-5'>編解碼器</b>移植TMS320DM365預(yù)覽版

    TMS320DM365中的智能編解碼器功能

    電子發(fā)燒友網(wǎng)站提供《TMS320DM365中的智能編解碼器功能.pdf》資料免費(fèi)下載
    發(fā)表于 10-14 10:24 ?0次下載
    TMS320DM365中的智能<b class='flag-5'>編解碼器</b>功能

    音頻編解碼器和ADC中有哪些常見(jiàn)噪聲問(wèn)題,如何幫助避免這些問(wèn)題?

    音頻編解碼器和 ADC 中有哪些常見(jiàn)噪聲問(wèn)題,如何幫助避免這些問(wèn)題?
    發(fā)表于 10-10 08:09

    音頻編解碼器中的常見(jiàn)噪聲問(wèn)題

    電子發(fā)燒友網(wǎng)站提供《音頻編解碼器中的常見(jiàn)噪聲問(wèn)題.pdf》資料免費(fèi)下載
    發(fā)表于 10-09 10:19 ?1次下載
    <b class='flag-5'>音頻</b><b class='flag-5'>編解碼器</b>中的常見(jiàn)噪聲問(wèn)題