99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Ambarella推出一款名為CV2的新型相機SoC

NJ90_gh_bee81f8 ? 來源:未知 ? 作者:胡薇 ? 2018-05-15 14:47 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

自動駕駛產(chǎn)業(yè)不乏想要超越Mobileye計算機視覺SoC的視覺芯片供應(yīng)商,安霸(Ambarella)就是其中之一。該公司正致力于縮短與Mobileye的距離,特別是因為Mobileye不僅是業(yè)界先驅(qū)且仍持續(xù)主導(dǎo)基于視覺的先進駕駛輔助(ADAS)和高度自動駕駛車市場。

Ambarella日前推出了一款名為CV2的新型相機SoC,專用于提供深度神經(jīng)網(wǎng)絡(luò)(DNN)和立體視覺處理,瞄準(zhǔn)ADAS和自動駕駛車市場。Ambarella宣稱擁有兩項與競爭對手不同的優(yōu)勢,其一是VisLab開發(fā)的新型計算機視覺架構(gòu)——Ambarella于2015年收購了這家歐洲計算機視覺與智能汽車控制系統(tǒng)開發(fā)商。另一項則是Ambarella自家設(shè)計且經(jīng)現(xiàn)場驗證的低功耗、高解析(HD)與超高解析(Ultra HD)視覺處理芯片,可用于IP監(jiān)控、運動、無人機與后裝行車記錄器等應(yīng)用。

pIYBAFr6g6OAYphWAAI8yYaJwiI561.png

CV2架構(gòu)圖

結(jié)合VisLab的經(jīng)驗和技術(shù),Ambarella開發(fā)出符合車規(guī)級的CV2,在一個芯片中整合了先進的計算機視覺、圖像處理、4Kp60視頻編碼與立體視覺技術(shù)。CV2延續(xù)上一代的CV1,據(jù)稱可提供較CV1更高20倍的深度神經(jīng)網(wǎng)絡(luò)性能。

CV1和CV2都可在同一芯片上提供單眼和立體視覺處理。VisLab創(chuàng)辦人Alberto Broggi解釋:“單眼視覺可在遠處偵測并分類對象——最遠達180公尺——而立體視覺相機能夠捕捉3D物體的形狀,而且無需訓(xùn)練即可檢測到一般障礙物?!?/p>

Broggi說,Ambarella的視覺SoC“專為在城市駕駛而設(shè)計,能執(zhí)行所有的感知處理”。而像路徑規(guī)劃以及轉(zhuǎn)向和停車等其他操控任務(wù),目前仍留給車載計算機。

然而,Broggi補充說,他的團隊計劃將融合和決策層移植到CV芯片上。

從意大利帕爾馬大學(xué)(University of Parma)獨立出來后,由Broggi教授帶領(lǐng)的計算機視覺團隊成為Ambarella高度自動化車輛的自動駕駛車(AV)軟件骨干。

針對Ambarella的視覺解決方案,IHS Markit信息娛樂和ADAS研究總監(jiān)Egil Juliussen說:“Ambarella的新產(chǎn)品看起來很不錯,可望用于ADAS、L4和L5級自動駕駛。我認(rèn)為,正是由于他們的技術(shù)涵蓋從算法、專利到SoC,而使其自動駕駛平臺與眾不同?!?/p>

Juliussen說:“他們還取得了加州的AV路測執(zhí)照——只不過是第52家獲得執(zhí)照的公司。”他強調(diào)Ambarella已能“提供開發(fā)工具和API,可讓1級(Tier-1)供應(yīng)商和汽車OEM連接ADAS和L3到L5系統(tǒng)?!盇mbarella計劃在第二季出樣CV2。

單眼視覺 vs.立體視覺

開發(fā)ADAS和全自動駕駛車究竟要用單眼視覺還是立體視覺?這是長久以來爭辯的焦點。英特爾(Intel)旗下子公司Mobileye認(rèn)為,單眼相機用于辨識車道、行人以及交通標(biāo)志和路上的其他車輛時已經(jīng)夠好了。

但是,立體視覺的支持者則認(rèn)為,以3D視角計算來自單個相機傳感器接收的平面2D架構(gòu)時,單眼視覺系統(tǒng)經(jīng)常不夠穩(wěn)定和可靠。

Ambarella在其芯片中融合了單眼和立體視覺處理。例如,其嵌入式車輛駕駛(EVA)平臺提供基于4K CV1的立體視覺相機,用于立體障礙物檢測的感知范圍超過150公尺。據(jù)該公司稱,它還支持超過180公尺的對象單眼視覺分類功能。

Broggi認(rèn)為,立體視覺是一項重要的功能升級。“許多信息都包含在對象的3D形狀中。即使相機看到一個未知形狀的物體——系統(tǒng)以前從未見過的東西,而且未經(jīng)辨識訓(xùn)練——立體視覺也能進行處理”。

擁有單眼和立體視覺功能也會導(dǎo)入重要的冗余。立體視覺能夠發(fā)現(xiàn)單眼相機看不見或無法辨認(rèn)的對象。

針對這兩類型產(chǎn)品的比較,Juliussen說:“Mobileye是采取‘單眼相機’策略的主要公司;當(dāng)攝影機價格昂貴時,這種途徑效果不錯。但立體相機的價格正持續(xù)降低。我認(rèn)為兼單眼和立體視覺更好,能為Ambarella帶來更大的市場和應(yīng)用領(lǐng)域?!?/p>

高動態(tài)范圍至關(guān)重要

Broggi說,“VisLab和Ambarella連手可說是絕佳組合,”因為兩家公司的團隊之間工作并未重迭;更重要的是,CV1和CV2均采用Ambarella的影像信號管路實現(xiàn)高動態(tài)范圍(HDR)成像、ultra HD處理以及在立體相機實現(xiàn)自動校準(zhǔn)。

除了卷積神經(jīng)網(wǎng)絡(luò)(CNN)和DNN的所有功能之外,由ADAS和AV部署的視覺傳感器還可以從視覺SoC提供的HD影像和高性能影像預(yù)處理功能中受益。

由于立體相機需要非常高的穩(wěn)定度,Broggi說:“立體相機的校準(zhǔn)可能會是一項挑戰(zhàn),尤其是在汽車應(yīng)用中,”因為汽車持續(xù)振動且經(jīng)常在寬溫度范圍內(nèi)運行。透過Ambarella的CV1和CV2芯片,“我們可以在芯片上實時自動校準(zhǔn)。”

同樣地,當(dāng)機器面對LED頭燈和交通標(biāo)志時,ADAS和AV可能會發(fā)生混淆。當(dāng)LED閃爍時——它可能會被開啟和關(guān)閉——其閃爍的假影可能引發(fā)機器視覺故障。Broggi解釋說,這種情況經(jīng)常發(fā)生在LED燈和相機的頻率不同步時。

Ambarella的CV1和CV2可以透過平均訊框數(shù)來減輕這種假影。他說:“我們可以在影像管線的早期階段使用預(yù)處理來清理它。”

對于最近Uber釀禍撞死一名在夜間穿越街道的婦女,Broggi并未發(fā)表任何評論,但他說,Ambarella提供支持HDR功能的芯片“能夠在極低光照條件下處理影像?!?/p>

EVA架構(gòu)

對于道路試駕,Ambarella開發(fā)了EVA自動駕駛平臺。EVA的感測套件目前已導(dǎo)入Lincoln MKZ車系,主要采用視覺傳感器,無需光達(LiDAR)即可實現(xiàn)自動駕駛。然而,基于EVA的AV還包含Bosch制造的前保險杠式雷達,以獲得更好的正面視野。

圖2:EVA平臺架構(gòu)

Broggi堅信,視覺是使自動駕駛車“充滿信心”的唯一傳感器。Broggi表示,相較于每秒產(chǎn)生200萬個3D點的光達,遠距離的立體相機每秒可擷取8-9億個3D點。

車輛通常配備兩組不同的立體相機。一套是遠距離感知,另一套是短距離感知。遠距離相機使用兩個4K傳感器(8百萬像素),基線長30公分,水平視角75度。短距離相機系統(tǒng)使用4個支持200萬像素的立體相機,以及10cm基線和魚眼鏡頭。

Ambarella解釋,每個遠距離相機都包含2個CV1 SoC。在短距離系統(tǒng)中,所有的相機都連接至一個中央模塊,透過2個CV1 SoC處理4個相機。

CV2的設(shè)計用于在芯片中支持4個立體相機和4個單眼相機。而CV1采用14nm CMOS工藝制造,但Ambarella的CV2將由三星(Samsung)以10nm工藝制造。盡管CV2的復(fù)雜度增加了,但Broggi說:“我們能夠保持相同的低功率——4至5瓦(W)?!?/p>

根據(jù)Juliussen的觀察,開發(fā)汽車用的計算機視覺產(chǎn)品是Ambarella的一項重大目標(biāo),該公司去年為此分配了超過50%的研發(fā)預(yù)算。Juliussen說:“如今看來他們?nèi)〉昧瞬诲e的進展。目前的產(chǎn)品已被中國OEM應(yīng)用于ADAS市場?!?/p>

他補充說:“他們目前的產(chǎn)品還被用于相機售后市場,如儲存行車數(shù)據(jù)的行車記錄器(EDR)。EDR將成為L4和L5自動車的標(biāo)準(zhǔn)配備。”這就是為什么CV2支持4Kp60 AVC和HEVC視頻編碼。該芯片可以將視頻記錄到汽車ADAS和自動駕駛系統(tǒng)。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • soc
    soc
    +關(guān)注

    關(guān)注

    38

    文章

    4386

    瀏覽量

    222692
  • 自動駕駛
    +關(guān)注

    關(guān)注

    788

    文章

    14312

    瀏覽量

    170576

原文標(biāo)題:安霸立體視覺處理SoC會給自動駕駛市場帶來什么?

文章出處:【微信號:gh_bee81f890fc1,微信公眾號:面包板社區(qū)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    AI SoC# 奕斯偉EIC7700 全球首基于RISC-V架構(gòu)的邊緣計算SoC芯片

    EIC7700X是一款性能優(yōu)異的邊緣計算SoC芯片,搭載64位RISC-V處理器和自研神經(jīng)網(wǎng)絡(luò)計算單元,支持全棧浮點計算和生成式大語言模型。該產(chǎn)品接口豐富,音視頻處理能力強大,在計算機視覺(CV
    的頭像 發(fā)表于 03-28 14:23 ?1908次閱讀
    AI <b class='flag-5'>SoC</b># 奕斯偉EIC7700 全球首<b class='flag-5'>款</b>基于RISC-V架構(gòu)的邊緣計算<b class='flag-5'>SoC</b>芯片

    請問瑞芯微的soc芯片,有沒有尺寸小于10mm*10mm的? 找一款小尺寸的soc用于視頻處理

    請問瑞芯微的soc芯片,有沒有尺寸小于10mm*10mm的? 找一款小尺寸的soc用于視頻處理
    發(fā)表于 03-28 11:47

    DA14531-00000FX2 超低功耗藍牙5.1 SOC芯片介紹

    DA14531-00000FX2 芯片介紹1. 概述DA14531-00000FX2 是 Dialog Semiconductor(現(xiàn)為 Renesas Electronics)推出一款
    發(fā)表于 03-10 16:47

    nRF7002是我們獨特的Wi-Fi產(chǎn)品組合中的第一款設(shè)備

    無線物聯(lián)網(wǎng)市場,推出了期待已久的 nRF7002 Wi-Fi 6 IC。 nRF7002是一款“協(xié)同IC”,這意味著當(dāng)與Nordic的現(xiàn)有產(chǎn)品起使用時,它能提供無縫的Wi-Fi連接和基于Wi-Fi
    發(fā)表于 03-10 15:42

    使用Python3.7導(dǎo)入cv2時遇到錯誤怎么解決?

    使用 Python* 版本 3.7。 Ran Classification Python* 演示。 在導(dǎo)入 cv2 時遇到錯誤: ImportError: DLL load failed: The specified module could not be found.
    發(fā)表于 03-05 09:37

    迅為電子推出基于龍芯2K0300的HMI產(chǎn)品

    2024年6月,龍芯中科發(fā)布了又一款重磅產(chǎn)品龍芯2K0300,龍芯2K0300芯片是一款基于LA264處理器核的多功能SoC芯片,可廣泛適用
    的頭像 發(fā)表于 02-13 14:30 ?583次閱讀
    迅為電子<b class='flag-5'>推出</b>基于龍芯<b class='flag-5'>2</b>K0300的HMI產(chǎn)品

    CV2880全數(shù)字轉(zhuǎn)全模擬的SOC單芯片介紹

    CV2880 是顆具備極高畫質(zhì)、超強性能,用于專業(yè)攝像領(lǐng)域和高端圖形顯示領(lǐng)域的 SOC 單芯片,支持目前市場上絕大多數(shù)的數(shù)字/模擬信號輸入輸出,適合安防監(jiān)控、視頻展臺、工業(yè)攝相機,高
    發(fā)表于 12-30 14:39 ?3次下載

    RF-WM-20CMB1模塊是RF-star全新推出一款嵌入式Wi-Fi+BT模塊

    Wi-fi模組 - RF-WM-20CMB1模塊是RF-star全新推出一款嵌入式Wi-Fi+BT模塊,該模塊采用瑞昱(Realtek)的SOC Wi-Fi方案RTL8720CM芯片設(shè)計,內(nèi)置高性能KM4 MCU,并包含多種外
    的頭像 發(fā)表于 12-02 15:51 ?660次閱讀
    RF-WM-20CMB1模塊是RF-star全新<b class='flag-5'>推出</b>的<b class='flag-5'>一款</b>嵌入式Wi-Fi+BT模塊

    如何用OpenCV的相機捕捉視頻進行人臉檢測--基于米爾NXP i.MX93開發(fā)板

    ;gt; 經(jīng)測試,只能支持640*480 為此建立opencv_test.py import cv2 video = cv2.VideoCapture(0) 設(shè)置相機參數(shù)video .set
    發(fā)表于 11-15 17:58

    NORDIC nPM1100 是一款集成式電源管理

    ,具有可配置的雙模式輸出。nPM1100是一款極其緊湊的PMIC器件,專為空間受限的應(yīng)用而設(shè)計,這些應(yīng)用使用小型鋰離子電池或鋰聚合物電池。它與所有nRF52和nRF53系列SoC兼容,支持通過USB以高達
    發(fā)表于 10-24 11:34

    影石Insta360推出新款A(yù)I運動相機Ace Pro 2

    10月23日,影石Insta360正式推出了其最新款體式廣角運動相機Ace Pro 2。這款相機搭載了全新的1/1.3英寸8K傳感器與徠卡
    的頭像 發(fā)表于 10-23 16:29 ?1954次閱讀

    nRF54L 系列SOC芯片NRF54L15 超低功耗藍牙5.4 SOC

    nRF54L15 是 nRF54L 系列的首系統(tǒng)級芯片 (SoC)。它是一款超低功耗藍牙 5.4 SoC,具有同類最佳的新型多協(xié)議無線電和
    發(fā)表于 10-15 15:03

    TO1013---同星智能推出一款創(chuàng)新型CAN FD光電收發(fā)器

    新品發(fā)布Newproductsrelease同星智能為應(yīng)對汽車行業(yè)的快速發(fā)展,直在積極推出新產(chǎn)品,以滿足市場對汽車電子基礎(chǔ)工具鏈產(chǎn)品的不斷升級和多樣化需求。同星智能近期又推出一款創(chuàng)
    的頭像 發(fā)表于 08-30 12:36 ?682次閱讀
    TO1013---同星智能<b class='flag-5'>推出</b><b class='flag-5'>一款</b>創(chuàng)<b class='flag-5'>新型</b>CAN FD光電收發(fā)器

    亞馬遜正測試一款融入AI芯片的新型服務(wù)器設(shè)計

    在得克薩斯州奧斯汀的秘密芯片實驗室中,亞馬遜正緊鑼密鼓地測試一款高度保密的新型服務(wù)器設(shè)計,該設(shè)計融入了亞馬遜自主研發(fā)的AI芯片,旨在與業(yè)界巨頭英偉達展開正面競爭。這舉措由亞馬遜云業(yè)務(wù)(AWS)旗下
    的頭像 發(fā)表于 07-26 14:21 ?915次閱讀

    受人眼啟發(fā)!科學(xué)家開發(fā)出新型改良相機

    新型事件相機系統(tǒng)與標(biāo)準(zhǔn)事件相機系統(tǒng)對比圖。 馬里蘭大學(xué)計算機科學(xué)家領(lǐng)導(dǎo)的個研究小組發(fā)明了種照相機
    的頭像 發(fā)表于 07-22 06:24 ?556次閱讀
    受人眼啟發(fā)!科學(xué)家開發(fā)出<b class='flag-5'>新型</b>改良<b class='flag-5'>相機</b>