99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

何為3D點云語義分割

新機(jī)器視覺 ? 來源:曼孚科技 ? 作者:曼孚科技 ? 2022-07-21 15:52 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

自動駕駛環(huán)境感知系統(tǒng)中,如何獲取高精度實時路況數(shù)據(jù),是決定自動駕駛系統(tǒng)行車安全的關(guān)鍵。

目前主流的兩種感知技術(shù)路徑“純視覺”與“高精地圖+激光雷達(dá)”中,由于激光雷達(dá)采集的3D點云路況數(shù)據(jù)更為密集、準(zhǔn)確且具備三維地理信息,因此以3D點云數(shù)據(jù)為基礎(chǔ)的感知算法即成為部分自動駕駛企業(yè)的核心技術(shù)路徑,并誕生了規(guī)模龐大的3D點云數(shù)據(jù)標(biāo)注需求。

何為3D點云語義分割

對3D點云數(shù)據(jù)的標(biāo)注處理,依據(jù)處理方式和使用標(biāo)注工具的不同,大致可以分為三類:

▌純點云

純點云使用的標(biāo)注工具以3D立體框為主,待標(biāo)注對象以3D立體框形式標(biāo)出,并附上相對應(yīng)的屬性信息標(biāo)簽,具體形式如下:

9c415ee6-07e1-11ed-ba43-dac502259ad0.jpg

圖片來源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺

▌融合標(biāo)注

融合標(biāo)注使用的3D標(biāo)注工具仍以3D立體框為主,但在3D點云數(shù)據(jù)以外,還需要使用2D標(biāo)注工具在點云數(shù)據(jù)相對應(yīng)的2D圖像中進(jìn)行標(biāo)注,3D點云數(shù)據(jù)中的標(biāo)注對象與2D圖像中的標(biāo)注對象一一對應(yīng),具體形式如下:

9c68cef4-07e1-11ed-ba43-dac502259ad0.png

圖片來源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺

▌3D點云語義分割

與2D圖像語義分割標(biāo)注邏輯類似,3D點云語義分割也是對不同的待標(biāo)注對象進(jìn)行上色分割、賦予語義標(biāo)簽,不同的是3D點云語義分割需要在3維立體點云中對每個像素點指定一個類別標(biāo)簽,比如車輛、行人、道路、建筑物等,具體形式如下:

9c823f6a-07e1-11ed-ba43-dac502259ad0.png

圖片來源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺

相較于前兩種標(biāo)注方式,在需要更為精細(xì)的空間信息時(比如自動泊車),立體框標(biāo)注場景中如鉸接式公交車等形狀可變的物體,3D點云語義分割標(biāo)注對路況數(shù)據(jù)的反饋更為精準(zhǔn),因此3D點云語義分割標(biāo)注在自動駕駛感知算法中所占的比重也愈發(fā)高漲。

常見標(biāo)注規(guī)則與標(biāo)注對象

不同算法、不同應(yīng)用場景對點云語義分割的標(biāo)注需求與規(guī)則也不盡相同,常見的相對簡單的自動駕駛3D點云語義分割標(biāo)注對象包括:

1、行人:通常指未騎乘交通工具的人,包含騎滑板車、平衡車的人。

2、騎車人:通常包括騎摩托車、自行車、三輪車、電動車等的人。

3、車輛:車輛是3D點云語義分割標(biāo)注場景下最為常見,且子分類較多的對象。子對象的劃分有依據(jù)車輛具體車型,比如轎車、卡車、公交車、救護(hù)車等,也有依據(jù)類別,比如客車、貨車、工程車等。

以類別為例,具體如下:

1)微型車:如代步車、各類三輪車等;

2)小型汽車:如轎車、SUV等;

3)客車:如大、中型巴士、雙層巴士等載人車輛;

4)貨車:如廂式貨車等載貨車輛;

5)工程車:灑水車、消防車、垃圾車等;

6)其他車輛。

4、路面相關(guān):與路面相關(guān)的各種對象,可具體細(xì)分為馬路可行駛區(qū)域、人行道、車道線等。

5、建筑物:如樓房、隧道橋面、橋墩、高架橋等。

6、植物:如草地、樹木等。

7、路面物體:路面物體也是一個子對象較多的種類,常見的包括:

1)護(hù)欄:如交通隔離欄、交通護(hù)欄等;

2)柵欄:臨時性的如交通水馬等;

3)交通標(biāo)志:如紅綠燈、標(biāo)識牌、桿等;

4)障礙物:如交通錐桶、警示牌、防撞桶、石墩等;

5)其他物體。

8、噪聲點云:如水霧、煙霧、汽車尾氣、雨水等各類噪聲點云。

以上是3D點云語義分割常見的各類標(biāo)注對象,但不同場景,具體的對象劃分規(guī)則以及待標(biāo)注對象種類都存在巨大差異,并沒有統(tǒng)一的標(biāo)準(zhǔn)。

而在更為具體的標(biāo)注規(guī)則上,差異同樣十分巨大。

常見的標(biāo)注規(guī)則如物體起標(biāo)范圍,通常會規(guī)定點云數(shù)量超過X以上,該物體即需要標(biāo)注,此外還會規(guī)定模糊無法判定物體的具體標(biāo)注規(guī)則等等,不一而足。

具象化的標(biāo)注實例如下:

9cbe3d76-07e1-11ed-ba43-dac502259ad0.png

標(biāo)注前(圖片來源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺)

9c823f6a-07e1-11ed-ba43-dac502259ad0.png

標(biāo)注后(圖片來源:曼孚科技SEED數(shù)據(jù)服務(wù)平臺)

隨著自動駕駛商業(yè)量產(chǎn)進(jìn)入新階段,開放路段場景復(fù)雜且多變,需要自動駕駛算法有更深的場景積累度與迭代能力,以滿足感知算法與行車安全的需求。

3D點云語義分割更精細(xì)的場景信息反饋,在幫助算法建立更貼合現(xiàn)實的場景模型,以及提升感知安全方面具備天然優(yōu)勢,在自動駕駛邁向大規(guī)模商業(yè)化應(yīng)用的今天,勢必將扮演更重要的角色。

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 3D
    3D
    +關(guān)注

    關(guān)注

    9

    文章

    2959

    瀏覽量

    110726
  • 激光雷達(dá)
    +關(guān)注

    關(guān)注

    971

    文章

    4234

    瀏覽量

    192816
  • 自動駕駛
    +關(guān)注

    關(guān)注

    788

    文章

    14312

    瀏覽量

    170564

原文標(biāo)題:案例分享:自動駕駛3D點云語義分割數(shù)據(jù)標(biāo)注

文章出處:【微信號:vision263com,微信公眾號:新機(jī)器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    3D AD庫文件

    3D庫文件
    發(fā)表于 05-28 13:57 ?5次下載

    告別漫長等待! 3D測量竟然可以如此的絲滑

    據(jù)進(jìn)行實時處理,快速得到全視角的彩色高精度2D圖像和3D。產(chǎn)品優(yōu)勢01高精度的在線3D檢測采用業(yè)界頂級的CMOS感光元件和超低畸變遠(yuǎn)心光
    的頭像 發(fā)表于 05-12 18:01 ?318次閱讀
    告別漫長等待! <b class='flag-5'>3D</b>測量竟然可以如此的絲滑

    3D閃存的制造工藝與挑戰(zhàn)

    3D閃存有著更大容量、更低成本和更高性能的優(yōu)勢,本文介紹了3D閃存的制造工藝與挑戰(zhàn)。
    的頭像 發(fā)表于 04-08 14:38 ?1029次閱讀
    <b class='flag-5'>3D</b>閃存的制造工藝與挑戰(zhàn)

    一種以圖像為中心的3D感知模型BIP3D

    在具身智能系統(tǒng)中,3D感知算法是一個關(guān)鍵組件,它在端側(cè)幫助可以幫助智能體理解環(huán)境信息,在云端可以用來輔助生成3D場景和3D標(biāo)簽,具備重要的研究價值?,F(xiàn)有主流算法主要依賴于
    的頭像 發(fā)表于 03-17 13:44 ?463次閱讀
    一種以圖像為中心的<b class='flag-5'>3D</b>感知模型BIP<b class='flag-5'>3D</b>

    對于結(jié)構(gòu)光測量、3D視覺的應(yīng)用,使用100%offset的lightcrafter是否能用于生成的應(yīng)用?

    你好,我有一些對于offset的疑問,希望能夠得到解答。 對于結(jié)構(gòu)光測量、3D視覺的應(yīng)用,使用100%offset的lightcrafter是否能用于生成的應(yīng)用? 標(biāo)定和三角重建算法和zero
    發(fā)表于 02-28 06:20

    英倫科技裸眼3D便攜屏有哪些特點?

    英倫科技裸眼3D便攜屏采用了領(lǐng)先的光場裸眼3D技術(shù),無需佩戴3D眼鏡即可觀看,給用戶帶來裸眼看3D視頻的體驗,為用戶帶來更加便捷和自由的視覺享受。
    的頭像 發(fā)表于 02-06 14:20 ?498次閱讀
    英倫科技裸眼<b class='flag-5'>3D</b>便攜屏有哪些特點?

    SciChart 3D for WPF圖表庫

    SciChart 3D for WPF 是一個實時、高性能的 WPF 3D 圖表庫,專為金融、醫(yī)療和科學(xué)應(yīng)用程序而設(shè)計。非常適合需要極致性能和豐富的交互式 3D 圖表的項目。 使用我們
    的頭像 發(fā)表于 01-23 13:49 ?613次閱讀
    SciChart <b class='flag-5'>3D</b> for WPF圖表庫

    騰訊混元3D AI創(chuàng)作引擎正式發(fā)布

    近日,騰訊公司宣布其自主研發(fā)的混元3D AI創(chuàng)作引擎已正式上線。這一創(chuàng)新性的創(chuàng)作工具將為用戶帶來前所未有的3D內(nèi)容創(chuàng)作體驗,標(biāo)志著騰訊在AI技術(shù)領(lǐng)域的又一重大突破。 混元3D AI創(chuàng)作引擎憑借其強(qiáng)大
    的頭像 發(fā)表于 01-23 10:33 ?591次閱讀

    騰訊混元3D AI創(chuàng)作引擎正式上線

    近日,騰訊公司宣布其自主研發(fā)的混元3D AI創(chuàng)作引擎已正式上線。這一創(chuàng)新性的創(chuàng)作工具,標(biāo)志著騰訊在3D內(nèi)容生成領(lǐng)域邁出了重要一步。 混元3D AI創(chuàng)作引擎的核心功能極為強(qiáng)大,用戶只需通過簡單的提示詞
    的頭像 發(fā)表于 01-22 10:26 ?582次閱讀

    C#通過Halcon實現(xiàn)3D重繪

    C# 通過 Halcon 實現(xiàn) 3D 重繪
    發(fā)表于 01-05 09:16 ?0次下載

    3D掃描技術(shù)醫(yī)療領(lǐng)域創(chuàng)新實踐,積木易搭3D掃描儀Mole助力定制個性化手臂康復(fù)輔具

    1、“3D掃描+3D打印”技術(shù)為矯形修復(fù)、醫(yī)療輔助器具定制等領(lǐng)域帶來突破性創(chuàng)新 近年來,隨著AI、大數(shù)據(jù)、3D掃描、3D打印、計算、物聯(lián)網(wǎng)
    的頭像 發(fā)表于 10-31 11:25 ?695次閱讀
    <b class='flag-5'>3D</b>掃描技術(shù)醫(yī)療領(lǐng)域創(chuàng)新實踐,積木易搭<b class='flag-5'>3D</b>掃描儀Mole助力定制個性化手臂康復(fù)輔具

    語義分割25種損失函數(shù)綜述和展望

    語義圖像分割,即將圖像中的每個像素分類到特定的類別中,是許多視覺理解系統(tǒng)中的重要組成部分。作為評估統(tǒng)計模型性能的主要標(biāo)準(zhǔn),損失函數(shù)對于塑造基于深度學(xué)習(xí)的分割算法的發(fā)
    的頭像 發(fā)表于 10-22 08:04 ?1607次閱讀
    <b class='flag-5'>語義</b><b class='flag-5'>分割</b>25種損失函數(shù)綜述和展望

    圖像語義分割的實用性是什么

    什么是圖像語義分割 圖像語義分割是一種將圖像中的所有像素點按照其語義類別進(jìn)行分類的任務(wù)。與傳統(tǒng)的圖像分類和目標(biāo)檢測任務(wù)不同,
    的頭像 發(fā)表于 07-17 09:56 ?910次閱讀

    圖像分割語義分割的區(qū)別與聯(lián)系

    圖像分割語義分割是計算機(jī)視覺領(lǐng)域中兩個重要的概念,它們在圖像處理和分析中發(fā)揮著關(guān)鍵作用。 1. 圖像分割簡介 圖像分割是將圖像劃分為多個區(qū)
    的頭像 發(fā)表于 07-17 09:55 ?1949次閱讀

    裸眼3D筆記本電腦——先進(jìn)的光場裸眼3D技術(shù)

    隨著科技的不斷進(jìn)步,裸眼3D技術(shù)已經(jīng)不再是科幻電影中的幻想。如今,英倫科技裸眼3D筆記本電腦將這一前沿科技帶到了我們的日常生活中。無論你是專業(yè)的3D模型設(shè)計師,還是希望在視頻播放和模型展示中體驗逼真
    的頭像 發(fā)表于 07-16 10:04 ?1042次閱讀