99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

智能眼鏡“重生”:AR芯片、AI大模型、聲效處理單元進入迭代新周期

Monika觀察 ? 來源:電子發(fā)燒友 ? 作者:莫婷婷 ? 2024-05-07 00:18 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報道(文/莫婷婷)得益于與智能手機智能設備連接、AI大模型技術加持以及用于聽障等特殊人群的功能增強,豐富了智能眼鏡的應用體驗,智能眼鏡市場正在經(jīng)歷顯著的增長。其中,AR智能眼鏡市場迎來重生。IDC預計2024年中國AR市場的出貨增速預計將達到101.0%,保持高速增長。AI智能音頻眼鏡也在技術的迭代下保持增長趨勢。

從開年至今,業(yè)內已經(jīng)推出了包括AR智能眼鏡以及AI智能音頻眼鏡在內的多款新品,我們將從這些新品來看智能眼鏡的技術迭代需求,以及未來發(fā)展方向。


AI大模型加持,AI+智能眼鏡成為標配

最近智能眼鏡市場最受關注的話題莫過于Meta。Meta宣布雷朋智能眼鏡(Ray-Ban Meta智能眼鏡)開始支持多模態(tài)版Llama 3,這將讓Meta AI升級為多模態(tài) AI。內置AI大模型已經(jīng)成為智能眼鏡的發(fā)展趨勢之一,從簡單的AI大模型到多模態(tài)大模型,Meta這一舉加速了智能眼鏡在AI大模型上迭代進程。

AI技術能給智能眼鏡帶來哪些交互體驗的升級呢?李未可科技AI負責人古鑒提到了三大方面,一是通過定向優(yōu)化的分發(fā)大模型,實現(xiàn)更自然的交互,第二是通過情感大模型提供更人性的陪伴,三是通過戶外多模態(tài)大模型提供更精準的服務。

就在今年4月,AR+AI眼鏡研發(fā)商李未可科技發(fā)布了針對可穿戴設備(如眼鏡等)自研的多模態(tài)大模型平臺——WAKE-AI,已經(jīng)搭載在旗下首款AI眼鏡——Meta Lens Chat上。

wKgZomY4rreAJzgrAAMfuqUoj2Y962.png
圖:李未可多模態(tài)大模型平臺WAKE-AI


根據(jù)介紹,WAKE-AI大模型在云端運行,具備文本生成、語言理解、圖像識別及視頻生成等多模態(tài)交互能力,賦能在AI眼鏡上,WAKE-AI將讓Meta Lens Chat眼鏡具備更強的AI語音交互能力,AI口語教學、翻譯能力。值得一提的是,隨著用戶使用Meta Lens Chat眼鏡越久,AI智能助理將能記住用戶喜好,成為更懂人的AI助手。這也將成為大多數(shù)內置AI大模型的智能穿戴設備未來的功能發(fā)展方向。

在芯片端,2023年,高通Hexagon NPU開始支持LLM和LVM,并支持Transformer。在2015年,模型只是簡單CNN,隨著大語言模型賦能的個人助手的出現(xiàn),2023年之前的LLM和LVM支持100億參數(shù),到了2023年后隨著多模態(tài)生成式AI模型的出現(xiàn),將需要支持100參數(shù)以上LLM和LVM。為了讓多模態(tài)AI大模型的性能發(fā)揮出來,Ray-Ban Meta 眼鏡增加了攝像頭,能夠通過攝像頭完成交互,例如識圖功能。攝像頭以及更多傳感器的加入,對NPU的性能提出了更高的要求。


空間計算時代對AR芯片的性能需求急速提升

MR設備的下一個階段是進入空間計算時代。2023年蘋果發(fā)布 Apple Vision Pro,空間計算時代也由此到來,并加速形成。在空間計算時代,AR智能眼鏡更加強調連接能力、交互、環(huán)境感知、增強現(xiàn)實等技術帶來的體驗。例如AR眼鏡與智能手機或其他計算設備連接時,需要強大的連接能力,虛擬信息與現(xiàn)實世界的融合需要傳感器的感知能力以及增強顯示技術的加持等等。

就在4月,AR智能眼鏡品牌廠商在Rokid Open Day 2024上,發(fā)布新一代AR Lite空間計算套裝,該套裝包括Rokid Max2眼鏡和Rokid Station2主機。根據(jù)介紹,在交互方式上,AR Lite空間計算套裝支持空間觸控交互和空間射線交互兩種交互方式,觸控方式增加了多指多手勢觸控,在Station 2的觸控板上就能完成相應操作。

空間射線的交互方式讓Station2主機成為遙控器。此前,AR智能眼鏡的空間射線指針會因為時延和精準度,導致使用體驗不佳。Rokid等AR品牌廠商都在不斷優(yōu)化空間射線指針的精準度。

wKgZomY4rsWAYeI1AATpBZhGoDo813.png
圖源:Rokid


為了減少用巨幕玩游戲時因為抖動帶來的不適感,Rokid還為AR Lite增加運動防抖模式。此外,面向辦公、觀影、娛樂等應用場景,AR Lite空間計算套裝還具備多聯(lián)屏模式,多任務協(xié)同處理的功能。

上述功能的實現(xiàn)需要計算、圖形渲染、手勢追蹤、數(shù)據(jù)處理、無線傳輸?shù)榷喾N技術都有相關的門檻,更為重要的是,AR空間計算的實現(xiàn)還需要計算機視覺和AI深度學習的結合,因此強大的AR芯片在AR智能眼鏡升級的過程中越來越重要。

目前,大多數(shù)AR智能眼鏡已經(jīng)與高通達成合作,采用高通驍龍平臺,例如Rokid的AR Lite、AR studio等,另外雷鳥X2 Lite也搭載了高通驍龍AR1平臺。

2022年,高通發(fā)布了首款專為AR眼鏡研發(fā)的處理器高通驍龍AR2平臺,采用分布式架構,支持九路并行攝像頭進行用戶和環(huán)境理解,帶有專用硬件加速引擎、AI加速器、重投影引擎,能夠改善用戶運動追蹤和定位、降低手勢追蹤或6DoF等高精度輸入交互時延、帶來更流暢的視頻體驗。

2023年,高通發(fā)布了全新空間計算平臺——第二代驍龍XR2和第一代驍龍AR1。第二代驍龍XR2平臺GPU性能提升2.5倍,GPU能效提升50%,AI每瓦特性能提升8倍。驍龍AR1專為AR智能眼鏡而設計,支持WiFi 7,峰值速度高達5.8Gbps,處理器搭載了第三代Hexagon NPU。拍攝性能也得到大幅提升,采用 14-bit 雙 ISP,并且增強了AI能力,提高照片和視頻的拍攝質量。


更豐富的音頻體驗,麥克風、DSP等音效處理單元同步升級

隨著應用領域越來越細分,智能眼鏡的分類也越來越多,除了上述提到的AR智能眼鏡、AI智能眼鏡,還有智能音頻眼鏡。顧名思義,智能音頻對音效體驗的要求更高。目前已經(jīng)有多家品牌廠商跨界推出智能音頻眼鏡,例如業(yè)內知名的音頻和揚聲器制造商JBL。

JBL近期推出了音悅范智能音頻眼鏡耳機。做音頻設備是JBL的強項,如今跨界將其音頻能力賦能到智能眼鏡中,也可以說是毫不意外。

但是作為開放式耳機的衍生產(chǎn)品,智能音頻眼鏡對音效的需求也是非常高,根據(jù)介紹,JBL這款智能音頻眼鏡的發(fā)聲單元搭載了線性度賽道型驅動單元、抗風噪通話降噪技術、指向性聲場系統(tǒng)投送技術等,減少漏音問題。能夠用于語音會議、會議等場景。
MIJIA智能音頻眼鏡悅享版也在近期開售,采用氣傳導的開放聲場技術,搭載SLS0820超聲線揚聲器融合音腔結構算法、逆聲場結構疊加防漏膜設計、降噪功能等,并且能夠精準拾取通話人聲。

在AR/VR設備中,要實現(xiàn)更高的聽覺效果需要麥克風和DSP芯片等音效處理單元的共同配合,例如現(xiàn)在大多數(shù)智能眼鏡都標配的通話功能需要用到降噪、回聲消除等技術,聽音樂的功能更強調音效。

在上游元器件廠商中,瑞聲科技是主流玩家之一。此前,瑞聲科技發(fā)布了首款AR專用超線性揚聲器,尺寸僅為8x20x3mm,重量1.45g,適用于小型化以及重量敏感的AR智能眼鏡,振幅可以達到0.5mm,不僅解決了音損的問題,還提升了低頻靈敏度。瑞聲科技還采取開放式后腔設計,減少漏音。

樓氏電子同樣是業(yè)內知名的聲學元器件廠商,針對VR/AR設備,公司已經(jīng)推出了多款DSP芯片,例如DSP芯片IA8201。該芯片具備高算力、低功耗的特點,能夠進行上行的語音通話處理、下行的音效處理。上行的語音通話處理包括降噪、回聲消除、低功耗語音喚醒等功能,下行的音效處理主要通過音效算法提升看電影、聽音樂的音效體驗。

wKgZomY4ruSAW8ZDAALjEAnvmw4632.png
圖:XREAL Air采用了樓氏音效處理單元(電子發(fā)燒友網(wǎng)攝)



小結:

IDC的數(shù)據(jù)顯示,2024年,中國AR市場的出貨增速預計將達到101.0%,保持高速增長。除了AR智能眼鏡,音頻智能眼鏡、AI智能眼鏡等更加細分的市場也將隨著市場需求出現(xiàn),實現(xiàn)增長,在這個過程中將帶動AR芯片、AI大模型,以及聲學處理單元等上游元器件的迭代。










聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • Ar
    Ar
    +關注

    關注

    25

    文章

    5150

    瀏覽量

    172398
  • AI
    AI
    +關注

    關注

    88

    文章

    34868

    瀏覽量

    277600
  • 智能眼鏡
    +關注

    關注

    8

    文章

    731

    瀏覽量

    73781
  • AI大模型
    +關注

    關注

    0

    文章

    371

    瀏覽量

    559
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    AR眼鏡解決方案_ar眼鏡芯片方案|光學方案|顯示方案

    在選擇AR眼鏡方案時,輕量化、小型化以及低功耗是核心考量因素。AR眼鏡的核心功能模塊主要包括光學顯示、傳感器、攝像頭、計算處理
    的頭像 發(fā)表于 06-13 19:45 ?201次閱讀
    <b class='flag-5'>AR</b><b class='flag-5'>眼鏡</b>解決方案_<b class='flag-5'>ar</b><b class='flag-5'>眼鏡</b><b class='flag-5'>芯片</b>方案|光學方案|顯示方案

    AR眼鏡|AR智能眼鏡|AR眼鏡開發(fā)|智能穿戴設備主板硬件解決方案

    AR眼鏡作為智能設備的前沿產(chǎn)品,其整機硬件涵蓋了多個關鍵組件,包括芯片、光學、顯示、存儲、結構件、麥克風、攝像頭、電池、揚聲器和傳感器等模塊。其主板不僅集成了計算
    的頭像 發(fā)表于 06-05 20:21 ?243次閱讀
    <b class='flag-5'>AR</b><b class='flag-5'>眼鏡</b>|<b class='flag-5'>AR</b><b class='flag-5'>智能</b><b class='flag-5'>眼鏡</b>|<b class='flag-5'>AR</b><b class='flag-5'>眼鏡</b>開發(fā)|<b class='flag-5'>智能</b>穿戴設備主板硬件解決方案

    AI智能眼鏡影像處理單元全面升級,攝像模組將成競爭核心

    電子發(fā)燒友網(wǎng)報道(文/莫婷婷)隨著應用領域的拓展,AI智能眼鏡的影像單元系統(tǒng)正迎來升級,最明顯的是攝像頭的使用。以多攝像頭模組和AI算法融合
    的頭像 發(fā)表于 05-12 09:20 ?4288次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>智能</b><b class='flag-5'>眼鏡</b>影像<b class='flag-5'>處理</b><b class='flag-5'>單元</b>全面升級,攝像模組將成競爭核心

    谷東AR+AI智能眼鏡如何改變生活

    這不是科幻電影,而是一副AR+AI眼鏡正在發(fā)生的“魔法”。今天,我們帶大家走進這款即將改變生活的未來科技——谷東AR+AI智能眼鏡。
    的頭像 發(fā)表于 04-14 12:50 ?520次閱讀

    智能眼鏡AI需求倒逼芯片革命,看高通、ST芯片方案如何適配

    但不限于語音識別與控制、實時翻譯、圖像識別與增強現(xiàn)實(AR)等。為了支持上述高級功能,智能眼鏡對其主控芯片提出了更高的要求。 ? ? 智能
    的頭像 發(fā)表于 04-12 00:54 ?2709次閱讀
    <b class='flag-5'>智能</b><b class='flag-5'>眼鏡</b><b class='flag-5'>AI</b>需求倒逼<b class='flag-5'>芯片</b>革命,看高通、ST<b class='flag-5'>芯片</b>方案如何適配

    炬芯科技智能穿戴芯片賦能Halliday AI眼鏡

    超過300萬美金。這一壯舉不僅體現(xiàn)了市場對AI智能設備的強烈需求,也標志著AR/AI眼鏡行業(yè)邁入了一個全新的時代。
    的頭像 發(fā)表于 04-01 17:16 ?678次閱讀

    AI智能眼鏡給存儲帶來的機遇與挑戰(zhàn)

    人工智能AI)逐漸走入人們的日常生活,AI智能眼鏡的問世更是引發(fā)了行業(yè)內外的強烈關注。AI
    的頭像 發(fā)表于 03-22 10:16 ?875次閱讀

    AI眼鏡模型激戰(zhàn):多大模型協(xié)同、交互時延低至1.3S

    電子發(fā)燒友網(wǎng)報道(文/莫婷婷)“百鏡大戰(zhàn)”開始時,也是AI模型智能眼鏡端加速落地的開始,一場關于智能
    的頭像 發(fā)表于 03-20 08:59 ?1225次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>眼鏡</b>大<b class='flag-5'>模型</b>激戰(zhàn):多大<b class='flag-5'>模型</b>協(xié)同、交互時延低至1.3S

    AI眼鏡定制_AI眼鏡_ai智能眼鏡主板PCBA方案

    AI智能眼鏡的硬件結構主要包括攝像頭、電池、PCBA、存儲器以及芯片等。其中,芯片方案是決定眼鏡
    的頭像 發(fā)表于 03-19 20:11 ?513次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>眼鏡</b>定制_<b class='flag-5'>AI</b><b class='flag-5'>眼鏡</b>_<b class='flag-5'>ai</b><b class='flag-5'>智能</b><b class='flag-5'>眼鏡</b>主板PCBA方案

    行業(yè)集結:共同定制 RK3566 集成 AI 眼鏡的前沿 AR 方案

    的 WiFi5 音視頻 SoC 模組。RK3566 芯片框圖 功能特點 這款 AI 眼鏡,絕非僅僅是一款冰冷的科技設備,它擁有以下功能:· AI
    發(fā)表于 02-20 18:44

    AI智能眼鏡_AI眼鏡定制_帶攝像頭的AI眼鏡解決方案

    AI智能眼鏡的主流芯片供應商包括高通、紫光、聯(lián)發(fā)科等。隨著芯片技術的不斷進步和規(guī)?;a(chǎn),AI
    的頭像 發(fā)表于 02-06 20:17 ?781次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>智能</b><b class='flag-5'>眼鏡</b>_<b class='flag-5'>AI</b><b class='flag-5'>眼鏡</b>定制_帶攝像頭的<b class='flag-5'>AI</b><b class='flag-5'>眼鏡</b>解決方案

    雷鳥創(chuàng)新與阿里云達成戰(zhàn)略合作,引領 AI模型AR眼鏡融合新紀元

    1月2日,消費級AR領先品牌雷鳥創(chuàng)新RayNeo與阿里云舉行戰(zhàn)略簽約儀式,雙方宣布在AI眼鏡領域達成獨家戰(zhàn)略合作,通義系列大模型將為雷鳥創(chuàng)新的AI
    發(fā)表于 01-03 13:45 ?306次閱讀
    雷鳥創(chuàng)新與阿里云達成戰(zhàn)略合作,引領 <b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>與<b class='flag-5'>AR</b><b class='flag-5'>眼鏡</b>融合新紀元

    AR眼鏡定制_AR智能眼鏡_帶攝像頭的AI智能眼鏡方案

    AR眼鏡依賴于聯(lián)發(fā)科技(MTK)強大的處理性能,采用6納米制程工藝,配備八核處理器,主頻達到2.0GHz。這款芯片在傳統(tǒng)計算平臺和人工
    的頭像 發(fā)表于 12-17 20:15 ?943次閱讀
    <b class='flag-5'>AR</b><b class='flag-5'>眼鏡</b>定制_<b class='flag-5'>AR</b><b class='flag-5'>智能</b><b class='flag-5'>眼鏡</b>_帶攝像頭的<b class='flag-5'>AI</b><b class='flag-5'>智能</b><b class='flag-5'>眼鏡</b>方案

    新的人機交互入口?大模型加持、AI眼鏡賽道開啟百鏡大戰(zhàn)

    Chat AI眼鏡、蜂巢科技推出的界環(huán)AI音頻眼鏡等,不同品牌推出的新品都有其各自的定位。與此同時,在市場需求的帶動下,越來越多企業(yè)進入
    的頭像 發(fā)表于 11-21 00:57 ?3918次閱讀
    新的人機交互入口?大<b class='flag-5'>模型</b>加持、<b class='flag-5'>AI</b><b class='flag-5'>眼鏡</b>賽道開啟百鏡大戰(zhàn)

    AI視覺芯片技術升級,加速智能終端設備迭代

    AR眼鏡。行業(yè)人士認為,AR眼鏡有望成為AI落地的理想載體。 ? AI
    的頭像 發(fā)表于 08-21 00:22 ?4568次閱讀