99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

關(guān)于機(jī)器視覺的詳細(xì)解析和應(yīng)用分析

貿(mào)澤電子 ? 來源:djl ? 作者:貿(mào)澤電子 ? 2019-08-21 17:24 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

與人類操作員類似,高級的機(jī)器比如一個(gè)機(jī)器人也需要具備辨別周圍環(huán)境的能力和意識才能做出正確的決定以及采取適當(dāng)?shù)男袆?dòng)。起初來看,盡管涉及到復(fù)雜技術(shù)的選擇,但是一個(gè)復(fù)雜機(jī)器的功能定義并不是很明確。然而可以說圖像識別是一個(gè)復(fù)雜的子系統(tǒng),但是它具備整個(gè)系統(tǒng)的所有設(shè)計(jì)元素。最后所有組件需要組裝起來形成一個(gè)視覺傳感系統(tǒng),不僅要滿足性能的要求還要達(dá)到成本和時(shí)間目標(biāo)。從大多數(shù)案例來看,應(yīng)用和設(shè)計(jì)目標(biāo)的實(shí)現(xiàn)取決于正確的技術(shù)選擇。

展望未來

對于高級機(jī)器人而言其中一個(gè)最大的制約可能就是視覺系統(tǒng),尤其當(dāng)采集大量的視覺數(shù)據(jù)并且需要進(jìn)行實(shí)時(shí)處理的時(shí)候。在各種各樣的生產(chǎn)系統(tǒng)中對視覺傳感器具有顯著需求的時(shí)候就會面臨這種挑戰(zhàn)。市場調(diào)研公司根據(jù)市場資源判斷預(yù)計(jì)在2015年至2021年期間累積年度增長率達(dá)8%到9%之間。

根據(jù)最近的一篇報(bào)告預(yù)測“機(jī)器視覺市場在2020年之前會達(dá)到125億美元”,“驅(qū)動(dòng)機(jī)器視覺市場的動(dòng)力是對質(zhì)量檢測和自動(dòng)化方面快速增長的需求、在制造工廠中對視覺指導(dǎo)機(jī)器人的需求增加、制造行業(yè)越來越多的法規(guī)要求、消費(fèi)者對專用機(jī)器視覺系統(tǒng)的應(yīng)用需求?!币虼?,自動(dòng)化應(yīng)用需求的增加大大促進(jìn)了對更強(qiáng)功能的機(jī)器人和視覺系統(tǒng)的需求。

不斷發(fā)展的機(jī)器人系統(tǒng)

實(shí)際上,機(jī)器人系統(tǒng)為專用的視覺系統(tǒng)呈現(xiàn)出一些非常有趣和多樣化的示例。四種不同類型的應(yīng)用呈現(xiàn)出了這個(gè)市場的多樣化:仿人型、飛行機(jī)器人、醫(yī)療機(jī)器人和管道機(jī)器人。

仿人型機(jī)器人最常見,無論是在技術(shù)雜志還是大眾媒體都能看到對其的報(bào)道。一些仿人型機(jī)器人甚至具有名字識別功能,例如Honda(本田)公司推出的ASIMO仿人型機(jī)器人、索尼公司開發(fā)的機(jī)器人具有像人類一樣重復(fù)某種活動(dòng)和執(zhí)行任務(wù)的能力、三星公司和其它廠商同樣吸引了很多觀眾,他們推出的機(jī)器人具有人類的身高大小,而且能夠屈膝伸腿和踢足球,甚至還能夠唱歌和跳舞。這些機(jī)器人必須能夠采集三維傳感器的數(shù)據(jù)才能保證移動(dòng)時(shí)不會摔倒,同時(shí)做出某些決策。幸運(yùn)的是,這些機(jī)器人有足夠的空間來放置視覺系統(tǒng)的所有組件。

圖1:大部分應(yīng)用中的機(jī)器人都需要具有視覺功能才能向前邁步(來源:維基百科)

與地球上的人類有些不同的是飛行機(jī)器人或者無人機(jī)需要采用小而輕的外觀設(shè)計(jì),這樣才能滿足性能要求。視頻監(jiān)控系統(tǒng)時(shí)大部分無人機(jī)上都使用的主要傳感器系統(tǒng),各種各樣的智能攝像頭都集成了視覺傳感器、光敏器件、甚至數(shù)據(jù)處理功能。

機(jī)器視覺同樣被應(yīng)用到醫(yī)療領(lǐng)域。無線膠囊內(nèi)窺(WCE)是一種診斷技術(shù),它能夠讓醫(yī)生不用外科手術(shù)的方式查看患者的胃腸道情況,有效的避免了一些復(fù)雜或者有風(fēng)險(xiǎn)的步驟。然而,我們也需要花費(fèi)數(shù)個(gè)小時(shí)反復(fù)觀看視頻錄像來尋找與癌癥或者其他疾病相關(guān)的病變和異常情況,因此出現(xiàn)了基于機(jī)器視覺的視頻分析技術(shù),機(jī)器人系統(tǒng)采用這種技術(shù)能夠?qū)⒉杉膱D像數(shù)據(jù)進(jìn)行解析,膠囊內(nèi)鏡攝像頭是2001年GivenImaging公司開發(fā)的,到目前為止全世界已經(jīng)有超過120萬的病人使用過。內(nèi)鏡技術(shù)作為一種顛覆性的技術(shù)將來不僅僅局限在一個(gè)小的膠囊攝像頭上,以后將能夠讓醫(yī)生來控制攝像頭的移動(dòng),這樣一些特殊的病理區(qū)域也能夠被觀察到,當(dāng)然這種類型的內(nèi)窺鏡是否可以歸為一種機(jī)器人系統(tǒng)還有待時(shí)間的檢驗(yàn)。

雖然如此,這些應(yīng)用都有一些功能的元素,例如圖像傳感器、軟件、計(jì)算能力來處理和分析不斷采集和積累的數(shù)據(jù)。

圖像傳感

在所有這些應(yīng)用中,有兩項(xiàng)技術(shù)能夠提供數(shù)字圖像采集的視覺傳感能力:CCD(電荷耦合元件)傳感器和CMOS圖像采集傳感器。

對于CCD傳感器來講,光敏區(qū)域接收的光源會被存儲并轉(zhuǎn)換為充電電荷,進(jìn)而形成電壓,作為模擬信號實(shí)現(xiàn)緩存和輸出。與此相反,CMOS傳感器的每個(gè)像素點(diǎn)都有光感區(qū)實(shí)現(xiàn)充電電壓的轉(zhuǎn)換,通過集成的放大器、聲音修正以及數(shù)字化電路,CMOS傳感器能夠輸出數(shù)字信號。

其他系統(tǒng)設(shè)計(jì)中也采用了CMOS技術(shù),CMOS的優(yōu)點(diǎn)就是便于集成,而且功耗低生成的熱量更少。它采用數(shù)字化信號輸出,與CCD相比,CMOS傳感器更夠通過更多的方式實(shí)現(xiàn)像素級別的控制。

CCD與CMOS圖像傳感器相比其唯一的優(yōu)勢就是它出現(xiàn)的時(shí)間更早,技術(shù)應(yīng)用更加成熟。盡管在很多市場還存在激烈競爭,但是對于兩種圖像傳感器技術(shù)來說像素的數(shù)量和分辨率都得到了大幅度提升。為應(yīng)用系統(tǒng)選擇正確傳感器一些需要詳細(xì)比較的方面包括光譜響應(yīng)和光源要求例如從大面積到超小面積都具有弱光線敏感和高動(dòng)態(tài)范圍。機(jī)器人系統(tǒng)中一些3D應(yīng)用使用的CMOS傳感器具有更先進(jìn)的特性和功能來處理復(fù)雜應(yīng)用中的一些問題。

確定結(jié)果

圖像傳感器是實(shí)現(xiàn)一個(gè)視覺系統(tǒng)最關(guān)鍵的一步。下一階段需要實(shí)現(xiàn)復(fù)雜的軟件算法和高速的數(shù)據(jù)處理能力。機(jī)器人、無人機(jī)甚至包括自動(dòng)駕駛汽車在內(nèi)都需要具備感知周圍三維環(huán)境的能力。對于3D視覺來講,有幾個(gè)算法已經(jīng)比較成熟了包括即時(shí)定位和映射(SLAM)、運(yùn)動(dòng)中恢復(fù)結(jié)構(gòu)方法(SfM)、立體視覺測距算法等等。我們的目標(biāo)是高分辨率和快速的數(shù)據(jù)處理能力。很多公司和組織都在不斷的努力研究,在現(xiàn)在基礎(chǔ)上進(jìn)行不斷的提升。

驗(yàn)證一個(gè)算法是否它的功能設(shè)計(jì)要求需要通過高速數(shù)字信號處理器DSP)來執(zhí)行這個(gè)算法,目前處理大量數(shù)據(jù)的一個(gè)方法就是通過云/服務(wù)器處理的方式。然而日益強(qiáng)大的DSP提供更多選擇。

舉個(gè)例子,DSP處理器如亞德諾半導(dǎo)體ADI)開發(fā)的Blackfin 16位/32位嵌入式處理器能夠勝任復(fù)雜的圖像處理,對于應(yīng)用的其他方面也具有軟件設(shè)計(jì)上的靈活性和可擴(kuò)展性如音頻、視頻、聲音處理、多模式基帶和數(shù)據(jù)包處理、控制處理和實(shí)時(shí)安全特性。Blackfin低功耗圖像處理平臺(BLIP)面向多種室內(nèi)和室外圖像傳感應(yīng)用。

圖2ADZS-BF707-BLIP2 BLIP硬件平臺預(yù)加載了軟件程序(來源:ADI)

設(shè)計(jì)視覺系統(tǒng)的一部分功能模塊是一項(xiàng)非常復(fù)雜的工程,當(dāng)我們借助其他方面的時(shí)候,開發(fā)平臺、評估系統(tǒng)和評估板卡大大簡化了復(fù)雜的DSP設(shè)計(jì)。舉個(gè)例子,584-ADZS-BF707EZLITE Blackfin圖像處理工具套件包括圖像處理原型設(shè)計(jì),能夠幫助工程師在Blackfin DSP平臺上快速開發(fā)復(fù)雜的圖像或者視頻處理解決方案。ADI的Blackfin BF-5xx和BF-60x系列處理器進(jìn)行了優(yōu)化,集成了一些軟件的原型功能模塊。一些應(yīng)用也會受益于MISRA-C兼容函數(shù)API庫,這個(gè)案例中,示例代碼展示了Blackfin DSP一些原語的使用。

圖3:亞諾德半導(dǎo)體584-ADZS-BF707EZLITE套件大大簡化了視覺系統(tǒng)的開發(fā)(來源:ADI)

>>>> 機(jī)器人視覺系統(tǒng)設(shè)計(jì)師當(dāng)然可以選擇系統(tǒng)計(jì)算部分采用哪些方案。

在一些應(yīng)用中,用戶想實(shí)現(xiàn)將攝像機(jī)無壓縮的數(shù)據(jù)流傳輸給PC,請看下面這個(gè)例子,Cypress半導(dǎo)體公司的EZ-USB FX3超速控制器提供了解決方法,芯片中燒錄的固件程序?qū)D像傳感器采集的數(shù)據(jù)轉(zhuǎn)換為USB視頻類(UVC)兼容的數(shù)據(jù)格式,這樣就可以對接PC主機(jī)的USB3.0接口實(shí)現(xiàn)數(shù)據(jù)傳輸。接收的一致性能夠讓攝像機(jī)使用操作系統(tǒng)(OS)自帶的驅(qū)動(dòng),并且兼容主機(jī)上的各種應(yīng)用程序。如果想更加快速方便的完成固件和設(shè)備驅(qū)動(dòng)程序的開發(fā),Cypress半導(dǎo)體公司提供了EX-USB FX3開發(fā)套件,采用的是FX3器件,包括完整的硬件和軟件解決方案。

圖4:Cypress EZ-USB FX3開發(fā)套件包括一個(gè)720P的圖像傳感器,30fps、24位彩色,簡化了視覺系統(tǒng)的開發(fā)(來源:Cypress半導(dǎo)體公司)

一個(gè)很容易忽略的設(shè)計(jì)細(xì)節(jié):連接器

對于復(fù)雜的系統(tǒng)尤其是圖像識別系統(tǒng)來說另一個(gè)重要的方面就是互相連接器。大量數(shù)據(jù)的高速傳輸需要進(jìn)行干擾信號屏蔽以及消耗功耗。專門面向機(jī)器人系統(tǒng)應(yīng)用設(shè)計(jì)的Molex CRC連接器是一個(gè)矩形的I/O信號屏蔽連接器,能夠提供7.0A至15.0A的信號/功率特性。對于小型的工業(yè)機(jī)器人系統(tǒng)和工廠自動(dòng)化設(shè)備,集成控制面板的系統(tǒng)一般都集成了行業(yè)標(biāo)準(zhǔn)的連接器預(yù)留接口。

為了組裝方便并且將庫存限制在一定數(shù)量內(nèi),這個(gè)連接器采用一個(gè)集成套件的封裝方式,接口外殼支持公頭/母頭連接,增加了設(shè)計(jì)的靈活性,所有這些方面集成在一起給視覺系統(tǒng)帶來了豐富的硬件設(shè)計(jì)選擇。

圖5:專為機(jī)器人應(yīng)用系統(tǒng)設(shè)計(jì)的數(shù)據(jù)連接器(來源:Molex)

一切終究會到來!

機(jī)器人智能視覺被認(rèn)為是一個(gè)巨大的進(jìn)步,會給現(xiàn)在很多的應(yīng)用領(lǐng)域帶來改進(jìn)并且不斷擴(kuò)大市場。包括系統(tǒng)的所有方面在內(nèi),從視覺傳感器到算法、數(shù)字信號處理和連接器必然會帶來不同的影響。

1.Yingju Chen 和Jeongkyu Lee,“基于機(jī)器視覺的無線內(nèi)窺鏡視頻分析”,診斷和內(nèi)鏡治療,2012年,文章編碼:41803。

2. G. Ciuti, A. Menciassi和P. Dario,“膠囊內(nèi)窺鏡:從現(xiàn)在到面向挑戰(zhàn)”,生物醫(yī)學(xué)工程,2011年第4期59—72。

總結(jié)

Randy Frank是Randy Frank科技和協(xié)會的董事長,也是“深入智能傳感器”一書的作者。他取得了韋恩州立大學(xué)的電機(jī)工程學(xué)碩士(MSEE)學(xué)位,致力于應(yīng)用傳感器、產(chǎn)品和技術(shù)市場的研究和探索。他也是SAE和IEEE協(xié)會的研究員,同時(shí)也是“設(shè)計(jì)世界”和“桌面工程”雜志的主要作者。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    213

    文章

    29748

    瀏覽量

    212981
  • 機(jī)器視覺
    +關(guān)注

    關(guān)注

    163

    文章

    4597

    瀏覽量

    122930
  • 人工智能
    +關(guān)注

    關(guān)注

    1807

    文章

    49029

    瀏覽量

    249664
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    單片機(jī)開發(fā)案例分析詳細(xì)解析

    本案例分析包括密碼鎖、定時(shí)器、交通燈等地案例制作分析,附有大量的源程序,大家可以在學(xué)習(xí)的時(shí)候,自己動(dòng)手去操作。單片機(jī)開發(fā)案例分析詳細(xì)解析
    發(fā)表于 11-29 15:11

    機(jī)器視覺的鏡頭選擇

    和測量方形、圓形和橢圓形物體。提高機(jī)器視覺系統(tǒng)的精確度,可以幫助保持統(tǒng)一的包裝表面和顏色。盡管照相機(jī)、分析軟件和照明對于機(jī)器視覺系統(tǒng)都是十分
    發(fā)表于 10-22 15:57

    機(jī)器視覺在工業(yè)自動(dòng)化領(lǐng)域的前景應(yīng)用解析

    視覺的需求也有了進(jìn)一步的提高,主要表現(xiàn)在市場的容量和用戶對機(jī)器視覺產(chǎn)品的質(zhì)量及性能的要求之上。眼下,機(jī)器視覺的應(yīng)用,正由過去單純的采集、
    發(fā)表于 03-31 11:50

    機(jī)器視覺系統(tǒng)在注塑行業(yè)的應(yīng)用

    機(jī)器視覺是通過采用非接觸式的光學(xué)感知設(shè)備自動(dòng)接收和解析真實(shí)場景的影像,以獲取信息和控制機(jī)器或工藝過程。機(jī)器
    發(fā)表于 06-09 14:55

    機(jī)器視覺應(yīng)用大賞,每日一帖 轉(zhuǎn)需~

    `嗨~大家上午好!前段時(shí)間跟大家分享了機(jī)器視覺的基礎(chǔ)概念及解析,接下來我們會將機(jī)器視覺的一系列應(yīng)用案例一一分享,歡迎有這方面了解需及感興趣的
    發(fā)表于 11-18 10:37

    機(jī)器視覺技術(shù)

    機(jī)器視覺就是用機(jī)器代替人眼來做測量和判斷。機(jī)器視覺系統(tǒng)是指通過機(jī)器
    發(fā)表于 01-17 07:56

    剛?cè)彳?b class='flag-5'>機(jī)器人設(shè)計(jì)與仿真分析實(shí)例解析

    分析實(shí)例七、軟體手柔性抓取控制與實(shí)驗(yàn)Matlab與機(jī)器人的通訊方法設(shè)計(jì)機(jī)器人逆運(yùn)動(dòng)學(xué)求解視覺處理方法設(shè)計(jì)八、剛?cè)彳?b class='flag-5'>機(jī)器人變剛度方法與控制離散
    發(fā)表于 09-02 11:17

    機(jī)器視覺應(yīng)用的攝像頭設(shè)計(jì)

    機(jī)器視覺應(yīng)用的攝像頭設(shè)計(jì) 摘要:本文將探討機(jī)器視覺應(yīng)用的 CMOS 圖像感應(yīng)器技術(shù)及架構(gòu)要求。此外,還將詳細(xì)分析
    發(fā)表于 01-04 15:46 ?1987次閱讀
    <b class='flag-5'>機(jī)器</b><b class='flag-5'>視覺</b>應(yīng)用的攝像頭設(shè)計(jì)

    機(jī)器視覺系統(tǒng)的三種應(yīng)用案例詳細(xì)說明

    本文檔的主要內(nèi)容詳細(xì)介紹的是機(jī)器視覺系統(tǒng)的三種應(yīng)用案例詳細(xì)說明包括了:機(jī)器視覺在藥用玻璃瓶檢測中
    發(fā)表于 09-04 16:39 ?23次下載
    <b class='flag-5'>機(jī)器</b><b class='flag-5'>視覺</b>系統(tǒng)的三種應(yīng)用案例<b class='flag-5'>詳細(xì)</b>說明

    機(jī)器視覺的技術(shù)及其應(yīng)用詳細(xì)說明

    視覺技術(shù)的基本原理并分析機(jī)器視覺系統(tǒng)的構(gòu)建; 接著論述了機(jī)器視覺技術(shù)的當(dāng)前主要應(yīng)用領(lǐng)域與情況;
    發(fā)表于 01-15 17:17 ?13次下載
    <b class='flag-5'>機(jī)器</b><b class='flag-5'>視覺</b>的技術(shù)及其應(yīng)用<b class='flag-5'>詳細(xì)</b>說明

    深度解析2023年機(jī)器視覺行業(yè)的十大預(yù)測

    高工機(jī)器人產(chǎn)業(yè)研究所(GGII)通過對機(jī)器視覺產(chǎn)業(yè)的梳理,結(jié)合宏觀數(shù)據(jù)和調(diào)研數(shù)據(jù)信息,秉承不悲觀、不樂觀,力求客觀的態(tài)度,深度解析2023年機(jī)器
    的頭像 發(fā)表于 11-29 11:18 ?2723次閱讀

    機(jī)器視覺LED光源分類及特點(diǎn)解析

    機(jī)器視覺LED光源分類及特點(diǎn)解析 機(jī)器視覺技術(shù)已經(jīng)逐漸應(yīng)用于各個(gè)領(lǐng)域,尤其是在工業(yè)和醫(yī)療領(lǐng)域。在機(jī)器
    的頭像 發(fā)表于 12-15 10:31 ?1854次閱讀

    機(jī)器視覺軟件有哪些 機(jī)器視覺軟件的優(yōu)點(diǎn)

    、醫(yī)學(xué)影像、交通管理和機(jī)器人等領(lǐng)域。本文將介紹機(jī)器視覺軟件的優(yōu)點(diǎn),并詳細(xì)闡述一些常見的機(jī)器視覺
    的頭像 發(fā)表于 02-02 10:53 ?2368次閱讀

    機(jī)器視覺的應(yīng)用實(shí)例解析

    機(jī)器視覺是一種利用計(jì)算機(jī)視覺技術(shù)對圖像進(jìn)行處理、分析和理解的技術(shù)。它在許多領(lǐng)域都有廣泛的應(yīng)用,包括工業(yè)自動(dòng)化、醫(yī)療診斷、交通監(jiān)控、安全監(jiān)控等。 一、引言
    的頭像 發(fā)表于 07-16 10:19 ?1024次閱讀

    ?VLM(視覺語言模型)?詳細(xì)解析

    詳細(xì)解析: 1. 核心組成與工作原理 視覺編碼器 :提取圖像特征,常用CNN(如ResNet)或視覺Transformer(ViT)。 語言模型 :處理文本輸入/輸出,如GPT、BE
    的頭像 發(fā)表于 03-17 15:32 ?4141次閱讀
    ?VLM(<b class='flag-5'>視覺</b>語言模型)?<b class='flag-5'>詳細(xì)</b><b class='flag-5'>解析</b>