99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

為什么跑AI往往用GPU而不是CPU?

穎脈Imgtec ? 2024-04-24 08:27 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

今天,人工智能AI)已經(jīng)在各個(gè)領(lǐng)域遍地開花,無(wú)論身處哪個(gè)行業(yè),使用AI來(lái)幫助獲取業(yè)務(wù)洞察,并建立競(jìng)爭(zhēng)優(yōu)勢(shì),已經(jīng)非常常見。不過(guò)一個(gè)有趣的現(xiàn)象是,在用戶采購(gòu)AI基礎(chǔ)設(shè)施時(shí),幾乎所有廠商都會(huì)強(qiáng)調(diào)其支持GPU的能力,并且支持的GPU數(shù)量越多,就代表其AI性能越強(qiáng)大。那么問(wèn)題來(lái)了,為什么是GPU而不是CPU?

GPU難道不是我們?nèi)粘J褂玫?a href="http://www.socialnewsupdate.com/v/tag/1247/" target="_blank">電腦里的,用于提高游戲性能或設(shè)計(jì)圖形所需的圖形處理單元嗎?為什么在AI方面,我們計(jì)算機(jī)里的“大腦”(CPU)反而很少提及呢?


一、為什么AI需要GPU?

要了解為什么GPU更適合AI,我們就要從GPU的誕生說(shuō)起。圖形處理單元 (GPU) 最初開發(fā)用于生成計(jì)算機(jī)圖形,是具有專用內(nèi)存的專用處理器,通常執(zhí)行渲染圖形所需的浮點(diǎn)運(yùn)算。從GPU的誕生我們可以看到,GPU是專為計(jì)算機(jī)開發(fā)的,旨在提高它們處理3D圖形的能力。這種特性決定了GPU僅用于參與任務(wù)或應(yīng)用程序代碼的某些部分,而不是整個(gè)過(guò)程。因此,GPU通常有較多的內(nèi)核,用于處理頻繁且彼此獨(dú)立的簡(jiǎn)單計(jì)算。而CPU又被稱為通用處理器,因?yàn)樗鼛缀蹩梢赃\(yùn)行任何類型的計(jì)算。不過(guò)CPU通常只有幾個(gè)內(nèi)核,即使是服務(wù)器專用的CPU也不過(guò)幾十個(gè)內(nèi)核,與GPU動(dòng)輒成百上千個(gè)內(nèi)核相比完全不是一個(gè)數(shù)量級(jí)。但這并不意味著CPU不夠好,CPU內(nèi)核雖然更少,但比數(shù)千個(gè)GPU內(nèi)核更強(qiáng)大。例如同時(shí)處理操作系統(tǒng)、處理電子表格、播放高清視頻、提取大型zip文件,這些是GPU根本無(wú)法完成的。說(shuō)到這里,你該明白GPU和CPU的區(qū)別了吧。總結(jié)一下,CPU最擅長(zhǎng)按順序處理單個(gè)更復(fù)雜的計(jì)算,而GPU更擅長(zhǎng)并行處理多個(gè)但更簡(jiǎn)單的計(jì)算。至于為什么AI需要的GPU,答案也很明顯了,因?yàn)橛?xùn)練AI模型的過(guò)程需要同時(shí)對(duì)所有數(shù)據(jù)樣本執(zhí)行幾乎相同的操作,而GPU的架構(gòu)設(shè)計(jì)具有快速同時(shí)處理多個(gè)任務(wù)所需的并行處理能力。

不過(guò)要注意的是,盡管GPU非常適合于AI模型算法,但并不意味著GPU在所有情況下都適用:

1、規(guī)模較小的訓(xùn)練CPU完全可以執(zhí)行訓(xùn)練AI模型所需的算法,特別是如果數(shù)據(jù)集規(guī)模相對(duì)較小,可以使用CPU避免高昂的前期成本。2、非并行算法本質(zhì)上,GPU是為圖形處理而設(shè)計(jì)的,因此當(dāng)某個(gè)AI模型算法并不是并行算法時(shí),CPU就是更好的選擇。某些涉及邏輯或密集內(nèi)存要求的AI算法也是CPU的強(qiáng)項(xiàng)。


二、GPU與AI計(jì)算

現(xiàn)在的AI計(jì)算,都在搶購(gòu)GPU。英偉達(dá)也因此賺得盆滿缽滿,為什么會(huì)這樣呢?原因很簡(jiǎn)單,因?yàn)锳I計(jì)算和圖形計(jì)算一樣,也包含了大量的高強(qiáng)度并行計(jì)算任務(wù)。深度學(xué)習(xí)是目前最主流的人工智能算法。從過(guò)程來(lái)看,包括訓(xùn)練(training)和推理(inference)兩個(gè)環(huán)節(jié)。訓(xùn)練環(huán)節(jié),通過(guò)投喂大量的數(shù)據(jù),訓(xùn)練出一個(gè)復(fù)雜的神經(jīng)網(wǎng)絡(luò)模型。在推理環(huán)節(jié),利用訓(xùn)練好的模型,使用大量數(shù)據(jù)推理出各種結(jié)論。訓(xùn)練環(huán)節(jié)由于涉及海量的訓(xùn)練數(shù)據(jù),以及復(fù)雜的深度神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu),所以需要的計(jì)算規(guī)模非常龐大,對(duì)芯片的算力性能要求比較高。而推理環(huán)節(jié),對(duì)簡(jiǎn)單指定的重復(fù)計(jì)算和低延遲的要求很高。它們所采用的具體算法,包括矩陣相乘、卷積、循環(huán)層、梯度運(yùn)算等,分解為大量并行任務(wù),可以有效縮短任務(wù)完成的時(shí)間。GPU憑借自身強(qiáng)悍的并行計(jì)算能力以及內(nèi)存帶寬,可以很好地應(yīng)對(duì)訓(xùn)練和推理任務(wù),已經(jīng)成為業(yè)界在深度學(xué)習(xí)領(lǐng)域的首選解決方案。

目前,大部分企業(yè)的AI訓(xùn)練,采用的是英偉達(dá)的GPU集群。如果進(jìn)行合理優(yōu)化,一塊GPU卡,可以提供相當(dāng)于數(shù)十甚至上百臺(tái)CPU服務(wù)器的算力。


三、AI與算力

AI與算力是當(dāng)今社會(huì)科技進(jìn)步的兩大驅(qū)動(dòng)力,它們的融合與創(chuàng)新正推動(dòng)著各個(gè)行業(yè)的發(fā)展,引領(lǐng)我們進(jìn)入一個(gè)全新的智能時(shí)代。算力,作為AI技術(shù)的基石,為AI提供了強(qiáng)大的計(jì)算能力和數(shù)據(jù)處理能力。隨著技術(shù)的不斷進(jìn)步,算力的提升使得AI模型能夠處理更大規(guī)模的數(shù)據(jù),實(shí)現(xiàn)更復(fù)雜的算法,從而提升AI的性能和準(zhǔn)確度。算力的發(fā)展,使得AI在圖像識(shí)別、語(yǔ)音識(shí)別、自然語(yǔ)言處理等領(lǐng)域取得了巨大的突破,為我們的生活帶來(lái)了諸多便利。而AI的崛起,也反過(guò)來(lái)促進(jìn)了算力的發(fā)展。隨著AI應(yīng)用領(lǐng)域的不斷拓展,對(duì)于算力的需求也日益增長(zhǎng)。為了滿足這種需求,人們不斷研發(fā)新的芯片、算法和架構(gòu),推動(dòng)算力的不斷提升。同時(shí),AI技術(shù)的發(fā)展也催生了一系列新的應(yīng)用場(chǎng)景,如自動(dòng)駕駛、智能家居、智能醫(yī)療等,這些應(yīng)用都需要強(qiáng)大的算力支持,從而推動(dòng)了算力技術(shù)的不斷突破和創(chuàng)新。AI與算力的結(jié)合,正在推動(dòng)各行各業(yè)的發(fā)展。在制造業(yè)中,AI與算力技術(shù)可以幫助企業(yè)實(shí)現(xiàn)智能制造、智能供應(yīng)鏈等,提高生產(chǎn)效率和產(chǎn)品質(zhì)量。在醫(yī)療領(lǐng)域,AI與算力技術(shù)可以幫助醫(yī)生實(shí)現(xiàn)精準(zhǔn)診斷、個(gè)性化治療等,提高醫(yī)療水平和患者滿意度。在金融領(lǐng)域,AI與算力技術(shù)可以幫助銀行、保險(xiǎn)等機(jī)構(gòu)實(shí)現(xiàn)風(fēng)險(xiǎn)評(píng)估、智能投顧等,提高金融服務(wù)的智能化水平。總之,AI與算力是當(dāng)今科技進(jìn)步的重要驅(qū)動(dòng)力,它們的融合與創(chuàng)新正推動(dòng)著我們進(jìn)入一個(gè)全新的智能時(shí)代。在未來(lái)的發(fā)展中,我們需要不斷關(guān)注技術(shù)趨勢(shì)、加強(qiáng)人才培養(yǎng)、加強(qiáng)監(jiān)管和規(guī)范,推動(dòng)AI與算力技術(shù)的健康發(fā)展,為人類創(chuàng)造更加美好的未來(lái)。

本文來(lái)源:渲大師

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4949

    瀏覽量

    131326
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35197

    瀏覽量

    280330
  • 人工智能
    +關(guān)注

    關(guān)注

    1807

    文章

    49036

    瀏覽量

    249793
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    CPU\GPU引領(lǐng),國(guó)產(chǎn)AI PC進(jìn)階

    電子發(fā)燒友網(wǎng)報(bào)道(文/黃晶晶)當(dāng)前AI PC已經(jīng)成為PC產(chǎn)業(yè)的下一個(gè)浪潮,國(guó)產(chǎn)CPU、GPU廠商在PC市場(chǎng)一直處于追趕態(tài)勢(shì),AI PC給了大家新的機(jī)遇,在這個(gè)賽道國(guó)產(chǎn)廠商加速了布局與滲
    的頭像 發(fā)表于 09-01 02:15 ?5689次閱讀
    <b class='flag-5'>CPU</b>\<b class='flag-5'>GPU</b>引領(lǐng),國(guó)產(chǎn)<b class='flag-5'>AI</b> PC進(jìn)階

    【VisionFive 2單板計(jì)算機(jī)試用體驗(yàn)】1、開箱初體驗(yàn)(刷系統(tǒng)+靜態(tài)IP設(shè)置+GPU分測(cè)評(píng))

    GPU分 首先用clinfo命令查看一下GPU,當(dāng)然也可以在debain-system setting-about界面看到BXE-4-32GPU benchmark軟件一般
    發(fā)表于 07-09 21:50

    【「算力芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】+NVlink技術(shù)從應(yīng)用到原理

    前言 【「算力芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」書中的芯片知識(shí)是比較接近當(dāng)前的頂尖芯片水平的,同時(shí)包含了芯片架構(gòu)的基礎(chǔ)知識(shí),但該部分知識(shí)比較晦澀難懂,或許是由于我一直從事的事芯片
    發(fā)表于 06-18 19:31

    超越CPU/GPU:NPU如何讓AI“輕裝上陣”?

    電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)NPU是一種專門為人工智能(AI)計(jì)算設(shè)計(jì)的處理器,主要用于高效執(zhí)行神經(jīng)網(wǎng)絡(luò)相關(guān)的運(yùn)算(如矩陣乘法、卷積、激活函數(shù)等)。相較于傳統(tǒng)CPU/GPU,NPU在能效比
    的頭像 發(fā)表于 04-18 00:05 ?2146次閱讀

    GPU加速計(jì)算平臺(tái)的優(yōu)勢(shì)

    傳統(tǒng)的CPU雖然在日常計(jì)算任務(wù)中表現(xiàn)出色,但在面對(duì)大規(guī)模并行計(jì)算需求時(shí),其性能往往捉襟見肘。GPU加速計(jì)算平臺(tái)憑借其獨(dú)特的優(yōu)勢(shì),吸引了行業(yè)內(nèi)人士的廣泛關(guān)注和應(yīng)用。下面,
    的頭像 發(fā)表于 02-23 16:16 ?435次閱讀

    CPUGPU:渲染技術(shù)的演進(jìn)和趨勢(shì)

    渲染技術(shù)是計(jì)算機(jī)圖形學(xué)的核心內(nèi)容之一,它是將三維場(chǎng)景轉(zhuǎn)換為二維圖像的過(guò)程。渲染技術(shù)一直在不斷演進(jìn),從最初的CPU渲染到后來(lái)的GPU渲染,性能和質(zhì)量都有了顯著提升。一、從CPUGPU
    的頭像 發(fā)表于 02-21 11:11 ?754次閱讀
    從<b class='flag-5'>CPU</b>到<b class='flag-5'>GPU</b>:渲染技術(shù)的演進(jìn)和趨勢(shì)

    GPU渲染才是大勢(shì)所趨?CPU渲染與GPU渲染的現(xiàn)狀與未來(lái)

    在3D建模和渲染領(lǐng)域,隨著技術(shù)的發(fā)展,CPU渲染和GPU渲染這兩種方法逐漸呈現(xiàn)出各自獨(dú)特的優(yōu)勢(shì),并且在不同的應(yīng)用場(chǎng)景中各有側(cè)重。盡管當(dāng)前我們處在一個(gè)CPU渲染和GPU渲染并行發(fā)展的時(shí)代
    的頭像 發(fā)表于 02-06 11:04 ?699次閱讀
    <b class='flag-5'>GPU</b>渲染才是大勢(shì)所趨?<b class='flag-5'>CPU</b>渲染與<b class='flag-5'>GPU</b>渲染的現(xiàn)狀與未來(lái)

    ASIC和GPU的原理和優(yōu)勢(shì)

    ? 本文介紹了ASIC和GPU兩種能夠用于AI計(jì)算的半導(dǎo)體芯片各自的原理和優(yōu)勢(shì)。 ASIC和GPU是什么 ASIC和GPU,都是用于計(jì)算功能的半導(dǎo)體芯片。因?yàn)槎伎梢杂糜?/div>
    的頭像 發(fā)表于 01-06 13:58 ?1792次閱讀
    ASIC和<b class='flag-5'>GPU</b>的原理和優(yōu)勢(shì)

    GPU加速云服務(wù)器怎么

    GPU加速云服務(wù)器是將GPU硬件與云計(jì)算服務(wù)相結(jié)合,通過(guò)云服務(wù)提供商的平臺(tái),用戶可以根據(jù)需求靈活租用帶有GPU資源的虛擬機(jī)實(shí)例。那么,GPU加速云服務(wù)器怎么
    的頭像 發(fā)表于 12-26 11:58 ?467次閱讀

    GPU是如何訓(xùn)練AI大模型的

    AI模型的訓(xùn)練過(guò)程中,大量的計(jì)算工作集中在矩陣乘法、向量加法和激活函數(shù)等運(yùn)算上。這些運(yùn)算正是GPU所擅長(zhǎng)的。接下來(lái),AI部落小編帶您了解GPU是如何訓(xùn)練
    的頭像 發(fā)表于 12-19 17:54 ?755次閱讀

    《算力芯片 高性能 CPUGPUNPU 微架構(gòu)分析》第3篇閱讀心得:GPU革命:從圖形引擎到AI加速器的蛻變

    CPU、GPU的演進(jìn)歷程,AI專用芯片或?qū)⒁I(lǐng)未來(lái)計(jì)算平臺(tái)的新方向。正如愛(ài)因斯坦所說(shuō):\"想象力比知識(shí)更重要\" —— 在芯片設(shè)計(jì)領(lǐng)域,創(chuàng)新思維帶來(lái)的突破往往令人驚嘆。
    發(fā)表于 11-24 17:12

    最強(qiáng)服務(wù)器CPU來(lái)了!AI性能直接翻倍

    以及AI服務(wù)器及AI數(shù)據(jù)中心場(chǎng)景的CPU產(chǎn)品。它不僅能支持廣泛的第三方GPUAI加速器,與它們組合形成強(qiáng)大的異構(gòu)計(jì)算平臺(tái),還能在其中補(bǔ)足
    的頭像 發(fā)表于 09-29 11:00 ?1038次閱讀
    最強(qiáng)服務(wù)器<b class='flag-5'>CPU</b>來(lái)了!<b class='flag-5'>AI</b>性能直接翻倍

    動(dòng)畫渲染GPU還是CPU的選擇思路

    。根據(jù)使用的硬件類型,渲染可以分為CPU渲染和GPU渲染。理解這兩者之間的區(qū)別,能幫助我們選擇合適的渲染方式,從而提高工作效率和渲染質(zhì)量。CPU渲染工作原理CPU渲染
    的頭像 發(fā)表于 09-28 08:05 ?814次閱讀
    動(dòng)畫渲染<b class='flag-5'>用</b><b class='flag-5'>GPU</b>還是<b class='flag-5'>CPU</b>的選擇思路

    gpu服務(wù)器與cpu服務(wù)器的區(qū)別對(duì)比,終于知道怎么選了!

    gpu服務(wù)器與cpu服務(wù)器的區(qū)別主要體現(xiàn)在架構(gòu)設(shè)計(jì)、性能特點(diǎn)、能耗效率、應(yīng)用場(chǎng)景、市場(chǎng)定位等方面,在以上幾個(gè)方面均存在顯著差異。CPU服務(wù)器更適合數(shù)據(jù)庫(kù)管理和企業(yè)應(yīng)用,
    的頭像 發(fā)表于 08-01 11:41 ?1032次閱讀

    算力服務(wù)器為什么選擇GPU

    服務(wù)器會(huì)選擇GPU不是傳統(tǒng)的CPU呢?GPUCPU的區(qū)別
    的頭像 發(fā)表于 07-25 08:28 ?1365次閱讀
    算力服務(wù)器為什么選擇<b class='flag-5'>GPU</b>