99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AI邊緣推理計(jì)算機(jī)設(shè)計(jì)通過邊緣提升節(jié)點(diǎn)變得簡單

星星科技指導(dǎo)員 ? 來源:嵌入式計(jì)算設(shè)計(jì) ? 作者:Dr. Johan Kraft ? 2022-10-18 11:52 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

當(dāng)計(jì)算系統(tǒng)根據(jù)經(jīng)過訓(xùn)練的機(jī)器學(xué)習(xí)算法進(jìn)行預(yù)測時,就會發(fā)生推理。雖然推理的概念并不新鮮,但在邊緣執(zhí)行這些高級操作的能力是相對較新的。

基于邊緣的推理引擎背后的技術(shù)是嵌入式計(jì)算機(jī)。但顯然,它遠(yuǎn)遠(yuǎn)不止于此,它具有放大的計(jì)算能力,大量的存儲空間以及實(shí)時處理大量數(shù)據(jù)所需的I / O。目標(biāo)是盡可能靠近生成數(shù)據(jù)的位置執(zhí)行操作,從而在最短的時間內(nèi)獲得最準(zhǔn)確的結(jié)果。該位置通常非??拷?a href="http://www.socialnewsupdate.com/v/tag/117/" target="_blank">傳感器,外部數(shù)據(jù)被輸入到系統(tǒng)中。一旦做出決策,它們通常會被送回邊緣進(jìn)行,從而推動邊緣的實(shí)時決策。

基于邊緣的推理引擎的一個關(guān)鍵問題是其部署環(huán)境。例如,它是否必須設(shè)計(jì)用于處理沖擊和振動?它會產(chǎn)生極高的溫度或低溫嗎?它是否會提供性能加速的正確平衡?對每個問題的回答都可能導(dǎo)致不同的設(shè)計(jì),或者至少以不同的方式進(jìn)行設(shè)計(jì)。

一些供應(yīng)商擁有全套內(nèi)部環(huán)境問題測試設(shè)備。這將包括熱調(diào)節(jié)模擬,當(dāng)然還有沖擊和振動。在大多數(shù)應(yīng)用中,專為“堅(jiān)固耐用和熱應(yīng)用”而設(shè)計(jì)的系統(tǒng)意味著它可以在-40°C至+ 70°C的溫度范圍內(nèi)工作,并且可以承受高達(dá)20 G的沖擊和3 Grms的振動。

人工智能而增強(qiáng)

通用嵌入式計(jì)算機(jī)和設(shè)計(jì)用于處理推理算法的計(jì)算機(jī)之間有明顯的區(qū)別。首先,推理引擎對計(jì)算性能的要求最高。任何設(shè)計(jì)人員都可以從貨架上撤下高端 X86 處理器并將其整合到系統(tǒng)中,即使是包含數(shù)據(jù)中心平臺功能的系統(tǒng)。但是,在硬件和軟件方面,需要人工智能系統(tǒng)方面的深厚專業(yè)知識和經(jīng)驗(yàn),才能設(shè)計(jì)出具有最大吞吐量的系統(tǒng)。Premio的專家通過其工業(yè)級計(jì)算機(jī)平臺的強(qiáng)大硬件工程和設(shè)計(jì)滿足了這一要求。

Premio提出了一種稱為邊緣增強(qiáng)節(jié)點(diǎn)的模塊化技術(shù),可以最大限度地提高邊緣的系統(tǒng)性能。硬件節(jié)點(diǎn)以物理方式連接到平臺的下半部分,并為需要數(shù)據(jù)采集以獲得實(shí)時見解的邊緣級工作負(fù)載提供硬件加速。這種兩件式模塊化設(shè)計(jì)有助于保持平臺的耐用性,同時通過創(chuàng)新型罐式磚塊和 GPU 中的非易失性內(nèi)存 (NVMe) 固態(tài)磁盤驅(qū)動器 (SSD) 提供性能加速,以實(shí)現(xiàn)并行計(jì)算性能。每個邊緣加速節(jié)點(diǎn)都使用高 RPM 主動冷卻來確保這些組件的可靠性。

Premio提供了許多不同的邊緣增強(qiáng)節(jié)點(diǎn)。例如,RCO-6000-CFL-2N2060S 選件增加了一個可熱插拔的 NVMe 固態(tài)硬盤罐,能夠容納多達(dá)兩個 15 毫米 U.2 固態(tài)硬盤和一個 PCIe GPU。第二種選擇是 RCO-6000-CFL-4NH,可增強(qiáng)存儲功能,支持 x2 熱插拔 NVMe 固態(tài)硬盤罐,可容納兩個 15 毫米 U.2 固態(tài)硬盤,用于支持硬件和軟件 RAID 的高容量 NVMe 存儲。第三個選項(xiàng) RCO-6000-CFL-8NS 專注于更高速的 NVMe 存儲,使系統(tǒng)集成商能夠添加多達(dá) 8 個 7 毫米、2.5 英寸的存儲。U.2 NVMe 固態(tài)硬盤,即將推出用于普瑞米歐的邊緣提升節(jié)點(diǎn)產(chǎn)品組合。

這種類型的拓?fù)浞浅V匾?,因?yàn)閷τ诨谶吘壍耐评硐到y(tǒng),存儲與駐留在背板上的I / O分開,從而最大限度地提高性能?!懊卦E”在于平衡PCIe通道的可用數(shù)量以提供最佳性能,這是Premio能夠從其嵌入式和數(shù)據(jù)中心計(jì)算機(jī)架構(gòu)設(shè)計(jì)組合中提取的設(shè)計(jì)技術(shù)。

必須考慮的其他I / O包括USB,COM接口,甚至5G。對于電路板供應(yīng)商和 OEM 來說,處理高吞吐量 I/O 的一個好方法是通過模塊化 I/O 子板來增加靈活性。通過這種方法,系統(tǒng)可以準(zhǔn)確地提供所需的I / O,并消除特定于應(yīng)用程序的工作負(fù)載的不必要的I / O選擇。

面向 ADAS 應(yīng)用的人工智能

當(dāng)今一個流行的應(yīng)用是ADAS或高級駕駛員輔助系統(tǒng)。這些復(fù)雜的系統(tǒng)基于有效的數(shù)據(jù)收集和共享為自動駕駛汽車應(yīng)用提供動力,旨在為五級自動駕駛提供不斷更智能的算法。

注意到這顯然是一個基于邊緣的應(yīng)用,邊緣增強(qiáng)節(jié)點(diǎn)設(shè)計(jì)團(tuán)隊(duì)肯定會結(jié)合適當(dāng)?shù)募庸坦δ芎蜔嵴{(diào)節(jié)。例如,系統(tǒng)操作員需要始終動態(tài)了解箱內(nèi)的溫度。在這里,可能的情況包括風(fēng)扇。作為耗電組件,該風(fēng)扇僅在必要時打開電源。

在Premio為客戶提供的軟件開發(fā)工具包中,有一個應(yīng)用程序可以讓他們最大限度地利用這些風(fēng)扇,確定它們應(yīng)該何時打開,它們應(yīng)該以什么速度運(yùn)行,等等。該軟件還提供了一個安全閥,因?yàn)樗梢詫⑺蠭 / O讀取操作從各種外圍設(shè)備暫?;?a target="_blank">CPU。也可以使用物理按鈕和LED指示燈執(zhí)行此操作。

最大化電源效率

功率效率是基于邊緣的推理引擎的首要任務(wù)。系統(tǒng)設(shè)計(jì)人員認(rèn)識到需要將處理能力放在更靠近物聯(lián)網(wǎng)傳感器的位置。一個直接的解決方案是添加各種性能加速器,通常采用 GPU、NVMe 存儲和 M.2 加速器的形式。此設(shè)計(jì)策略的權(quán)衡是,每個組件都是耗電的組件,需要解決功耗與性能預(yù)算的問題。將這些任務(wù)分離到邊緣增強(qiáng)節(jié)點(diǎn)可提高處理能力并減少主機(jī)處理器上的負(fù)載,主機(jī)處理器的負(fù)載在其加固的寬功率輸入(從 9 V 到 48 V DC)中隔離。模塊化邊緣加速節(jié)點(diǎn)的一個獨(dú)特功能是,它為可靠性至關(guān)重要的最苛刻的邊緣工作負(fù)載中的強(qiáng)大性能加速模塊(NVMe SSD、GPU 或 m.2 加速器)提供電源穩(wěn)定性。

由于基于邊緣的推理引擎會生成大量數(shù)據(jù),因此存儲是關(guān)鍵。邊緣加速節(jié)點(diǎn)包括一個 6 Gbit/s SATA 接口,可連接四個驅(qū)動器(兩個內(nèi)部驅(qū)動器和兩個外部驅(qū)動器)。然而,對于此應(yīng)用程序而言,合并 NVMe 驅(qū)動器可能會改變游戲規(guī)則。在這種特殊情況下,它最多通過四個 2.5 英寸 15 毫米驅(qū)動器和八個 2.5 英寸 7 毫米驅(qū)動器中的另一個選項(xiàng)進(jìn)行處理。

雖然板載存儲至關(guān)重要,但將數(shù)據(jù)與云協(xié)調(diào)的能力也至關(guān)重要。在此方案中,此過程通過標(biāo)準(zhǔn)千兆以太網(wǎng)或 10 Gbit/s 模塊進(jìn)行處理。無線或蜂窩LTE也是選項(xiàng),具體取決于應(yīng)用程序和環(huán)境。由于該設(shè)計(jì)提供靈活的I/O子板,用戶甚至可以集成5G子板模塊,以實(shí)現(xiàn)5G部署的超低延遲連接。

安全性和下一代可升級性

雖然任何工業(yè)平臺都必須包含適當(dāng)?shù)陌踩胧?,但將系統(tǒng)性能推向邊緣會使安全性變得更加重要。Premio 以公認(rèn)的行業(yè)標(biāo)準(zhǔn)(如 TPM 2.0)為基礎(chǔ)來加密數(shù)據(jù)。然后是要解決的物理方面 - 有人從字面上竊取物理系統(tǒng)。為了解決這個問題,邊緣增強(qiáng)節(jié)點(diǎn)上的 NVMe 驅(qū)動器位于鎖和鑰匙驅(qū)動器籠后面。

邊緣增強(qiáng)節(jié)點(diǎn)的模塊化使其本質(zhì)上可升級。只需在模塊可用時將其換成性能更高的版本即可。雖然此功能可能會略微增加物料清單(BOM),但它可以保護(hù)長期投資,因?yàn)榭梢员WC系統(tǒng)具有更長的有效壽命。在軟件方面,可以通過LAN在現(xiàn)場進(jìn)行無線升級,并且由于內(nèi)置的安全功能,可以放心地完成。而隨著行業(yè)走向云原生升級路徑,這已經(jīng)成為升級的首選方式。只要系統(tǒng)保持“容器化”狀態(tài),安全問題就會得到解決和管理 - 無論是在系統(tǒng)的整個生命周期內(nèi),還是在不斷變化的數(shù)字安全威脅環(huán)境中。

Premio認(rèn)識到,其本地化的制造使公司在競爭中占據(jù)了一席之地。所有組裝都在洛杉磯的工廠進(jìn)行,無論訂單大小。這消除了海外供應(yīng)鏈的潛在負(fù)擔(dān),加快了上市時間并簡化了部署,使客戶能夠非常快速地啟動和運(yùn)行企業(yè)規(guī)模和部署。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 計(jì)算機(jī)
    +關(guān)注

    關(guān)注

    19

    文章

    7663

    瀏覽量

    90812
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35164

    瀏覽量

    279995
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    研華重返臺北電腦展,引領(lǐng)全球 AI 邊緣計(jì)算新浪潮

    研華將以“EdgeComputingWISE-EdgeinAction”為策展主軸,重磅登場2025COMPUTEX臺北國際計(jì)算機(jī)展,通過一系列主題論壇、展覽與在線直播活動,攜手全球客戶及伙伴共同
    發(fā)表于 05-08 16:25 ?1645次閱讀
    研華重返臺北電腦展,引領(lǐng)全球 <b class='flag-5'>AI</b> <b class='flag-5'>邊緣</b><b class='flag-5'>計(jì)算</b>新浪潮

    Deepseek海思SD3403邊緣計(jì)算AI產(chǎn)品系統(tǒng)

    海思SD3403邊緣計(jì)算AI框架,提供了一套開放式AI訓(xùn)練產(chǎn)品工具包,解決客戶低成本AI系統(tǒng),針對差異化
    發(fā)表于 04-28 11:05

    6TOPS算力NPU加持!RK3588如何重塑8K顯示的邊緣計(jì)算新邊界

    框架,如TensorFlow、PyTorch等。這種架構(gòu)設(shè)計(jì)使得芯片在處理AI任務(wù)時能夠?qū)崿F(xiàn)高效的并行計(jì)算,極大地提升了運(yùn)算效率。在邊緣計(jì)算
    發(fā)表于 04-18 15:32

    華為AI WAN在智算邊緣推理網(wǎng)絡(luò)中的關(guān)鍵優(yōu)勢

    WAN:智算邊緣推理網(wǎng)絡(luò)架構(gòu)、實(shí)踐及產(chǎn)業(yè)進(jìn)展”的演講,詳細(xì)闡述了AI WAN在智算邊緣推理網(wǎng)絡(luò)中的關(guān)鍵優(yōu)勢及其對產(chǎn)業(yè)發(fā)展的深遠(yuǎn)意義。
    的頭像 發(fā)表于 04-09 09:53 ?473次閱讀

    2025邊緣AI預(yù)測:昇騰310B邊緣將占工業(yè)推理市場35%的三大動因

    據(jù)工信部《2025 智能算力發(fā)展白皮書》預(yù)測,到 2025 年我國邊緣 AI 推理芯片市場規(guī)模將突破 580 億元,其中工業(yè)場景占比達(dá) 42%。在這場變革中,昇騰 310B 邊緣
    的頭像 發(fā)表于 03-24 14:09 ?932次閱讀
    2025<b class='flag-5'>邊緣</b><b class='flag-5'>AI</b>預(yù)測:昇騰310B<b class='flag-5'>邊緣</b>將占工業(yè)<b class='flag-5'>推理</b>市場35%的三大動因

    什么是邊緣計(jì)算網(wǎng)關(guān)?深度解析邊緣計(jì)算網(wǎng)關(guān)的核心技術(shù)與應(yīng)用場景

    景等維度,全面解析邊緣計(jì)算網(wǎng)關(guān)的價值與未來。 一、邊緣計(jì)算網(wǎng)關(guān)的定義與架構(gòu) 1.1 定義與核心功能 邊緣
    的頭像 發(fā)表于 03-24 10:02 ?752次閱讀
    什么是<b class='flag-5'>邊緣</b><b class='flag-5'>計(jì)算</b>網(wǎng)關(guān)?深度解析<b class='flag-5'>邊緣</b><b class='flag-5'>計(jì)算</b>網(wǎng)關(guān)的核心技術(shù)與應(yīng)用場景

    【幸狐Omni3576邊緣計(jì)算套件試用體驗(yàn)】RKNN 推理測試與圖像識別

    、量化、推理、性能和內(nèi)存評估、量化精度分析以及模型加密等功能。 首先需要在計(jì)算機(jī)上運(yùn)行 RKNN-Toolkit2 工具,將訓(xùn)練好的模型轉(zhuǎn)換為 RKNN 格式模型,之后使用 RKNN C API 或
    發(fā)表于 03-20 16:14

    英飛凌邊緣AI平臺通過Ultralytics YOLO模型增加對計(jì)算機(jī)視覺的支持

    計(jì)算機(jī)視覺的支持,擴(kuò)大了當(dāng)前對音頻、雷達(dá)和其他時間序列信號數(shù)據(jù)的支持范圍。在增加這項(xiàng)支持后,該平臺將能夠用于開發(fā)低功耗、低內(nèi)存的邊緣AI視覺模型。這將給諸多應(yīng)用領(lǐng)域的機(jī)器學(xué)習(xí)開發(fā)人員帶來極大的便利,例如工廠可以借此實(shí)現(xiàn)對零件的
    的頭像 發(fā)表于 03-11 15:11 ?389次閱讀
    英飛凌<b class='flag-5'>邊緣</b><b class='flag-5'>AI</b>平臺<b class='flag-5'>通過</b>Ultralytics YOLO模型增加對<b class='flag-5'>計(jì)算機(jī)</b>視覺的支持

    AI賦能邊緣網(wǎng)關(guān):開啟智能時代的新藍(lán)海

    在數(shù)字化轉(zhuǎn)型的浪潮中,AI邊緣計(jì)算的結(jié)合正掀起一場深刻的產(chǎn)業(yè)變革。邊緣網(wǎng)關(guān)作為連接物理世界與數(shù)字世界的橋梁,在AI技術(shù)的加持下,正從
    發(fā)表于 02-15 11:41

    AI模型部署邊緣設(shè)備的奇妙之旅:如何在邊緣端部署OpenCV

    圖像的質(zhì)量,使得圖像更適合人類觀察或者為后續(xù)的分析做準(zhǔn)備。 方法:通常涉及像素級別的操作,比如調(diào)整亮度、對比度、顏色校正、濾波(如高斯模糊、中值濾波去噪)、邊緣檢測、形態(tài)學(xué)變換(膨脹、腐蝕)等。 計(jì)算機(jī)視覺
    發(fā)表于 12-14 09:31

    研華科技邊緣AI平臺榮獲2024年IoT邊緣計(jì)算卓越獎

    的 2024 年物聯(lián)網(wǎng)邊緣計(jì)算卓越獎。研華提供全棧式AI應(yīng)用產(chǎn)品,以滿足從邊緣到云的工業(yè) AI 應(yīng)用的多樣化需求,致力于推動工業(yè)
    的頭像 發(fā)表于 11-07 18:11 ?1035次閱讀

    邊緣計(jì)算的技術(shù)挑戰(zhàn)與解決方案

    它們在處理大規(guī)模數(shù)據(jù)或復(fù)雜計(jì)算任務(wù)時的能力。 網(wǎng)絡(luò)帶寬和延遲 邊緣節(jié)點(diǎn)通常位于網(wǎng)絡(luò)邊緣,網(wǎng)絡(luò)帶寬和延遲可能限制了從邊緣
    的頭像 發(fā)表于 10-24 14:36 ?1829次閱讀

    邊緣計(jì)算邊緣設(shè)備的關(guān)系

    邊緣計(jì)算邊緣設(shè)備之間存在著密切的關(guān)系,它們是相互依存、相互促進(jìn)的。以下是對這兩者關(guān)系的介紹: 一、定義與功能 邊緣計(jì)算
    的頭像 發(fā)表于 10-24 14:33 ?948次閱讀

    邊緣計(jì)算的未來發(fā)展趨勢

    的網(wǎng)絡(luò)環(huán)境。未來,邊緣計(jì)算將與5G技術(shù)進(jìn)一步融合,推動更多創(chuàng)新應(yīng)用的落地。 同時,邊緣計(jì)算與人工智能(AI)技術(shù)的結(jié)合也將更加緊密。
    的頭像 發(fā)表于 10-24 14:21 ?1842次閱讀

    初創(chuàng)公司SEA.AI利用NVIDIA邊緣AI計(jì)算機(jī)視覺技術(shù)變革航海安全系統(tǒng)

    總部位于奧地利林茨的初創(chuàng)公司正在利用 NVIDIA 邊緣 AI計(jì)算機(jī)視覺技術(shù)變革航海安全系統(tǒng),讓每一次出海變得更安全。
    的頭像 發(fā)表于 09-09 09:32 ?920次閱讀