99精品伊人亚洲|最近国产中文炮友|九草在线视频支援|AV网站大全最新|美女黄片免费观看|国产精品资源视频|精彩无码视频一区|91大神在线后入|伊人终合在线播放|久草综合久久中文

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

谷歌發(fā)布多模態(tài)Gemini大模型及新一代TPU系統(tǒng)Cloud TPU v5p

智能計算芯世界 ? 來源:智能計算芯世界 ? 2023-12-12 10:50 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

谷歌亦發(fā)布新一代TPU 系統(tǒng)——Cloud TPU v5p,以幫助訓(xùn)練尖端的 AI 模型。目前,Bard 已開始使用 Gemini Pro 的微調(diào)版本來進行更高級的推理,并計劃將 Gemini 引入旗下智能手機品牌Pixel。此外,從 12 月 13 日起,開發(fā)者和企業(yè)客戶可以通過 Google AIStudio 或 Google Cloud Vertex AI 中的 Gemini API 訪問 Gemini Pro。谷歌計劃于 2024 年初向開發(fā)人員和企業(yè)客戶正式推出 Gemini Ultra。

(1)Gemini 多模態(tài):支持文本、圖像、視頻音頻輸入,支持文本和圖像輸出。

(2)Gemini 三個版本:Ultra、Pro、Nano。

(3)AlphaCode2:Gemini 加成,擅長編程、涵蓋了復(fù)雜的數(shù)學(xué)和理論計算機科學(xué)等問題。

(4)視頻理解方面:從官方的演示視頻里我們可以看到,Gemini 對于演示人員的動作可以進行分析和推理,并且實時性很高。從類人角度看,實現(xiàn)了聽、說、看、互動等,甚至可以同時識別和理解文本、圖像和視頻。

(5)應(yīng)用融合情況:Bard 和 Pixel 8 Pro 智能手機已經(jīng)應(yīng)用了 Gemini,未來 Gemini 會被整合到 Google 的搜索引擎、廣告產(chǎn)品、Chrome 瀏覽器等。

(6)硬件層面:用了谷歌的 TPU 集群。Gemini Ultra 用了最新版本的 v5p,如圖 v5p 在互聯(lián)帶寬方面的提升更顯著。

46b61608-987f-11ee-8b88-92fbcf53809c.png

谷歌使用內(nèi)部設(shè)計的 TPU v4 和 v5e 訓(xùn)練 Gemini 1.0。谷歌針對三種不同的尺寸對 Gemini 1.0 進行了優(yōu)化:

①Gemini Ultra,是谷歌迄今為止最大且能力最強的模型,適用于復(fù)雜度高的任務(wù),主要面向數(shù)據(jù)中心和企業(yè)級應(yīng)用;

②Gemini Pro,可擴展的模型,適用于廣泛的任務(wù),其為谷歌諸多 AI 服務(wù)提供動力,目前已成為 Bard 的支柱模型;

③Gemini Nano,作為運行在終端設(shè)備上的最為高效的模型,其能夠在Android 設(shè)備上本地和離線運行。Pixel 8 Pro 將會是第一款運行Gemini Nano 的智能手機。Gemini Nona 擁有兩個版本,其中,Nano-1 參數(shù)量為 1.8B,Nano-2 參數(shù)量為 3.25B。在公布 Gemini的同時,谷歌亦推出其迄今為止最強大、最高效且可擴展的 TPU 系統(tǒng) Cloud TPU v5p,該系統(tǒng)專為訓(xùn)練尖端 AI 模型而設(shè)計。

在 AI 性能方面,TPU v5p 能夠提供 459 TFLOPS 的 BF16 性能或 918 TFLOPS的 INT8 性能,支持 95GB 的高帶寬內(nèi)存,能夠以 2.76TB/s 的速度傳輸數(shù)據(jù)。在模型訓(xùn)練方面,TPU v5p 在 LLM 訓(xùn)練速度上顯示出 2.8倍的代際提升,即使相比 TPU v5e 也有約 50%的提升。

Gemini 是首款原生多模態(tài)大模型,其性能或基本全面領(lǐng)先 GPT-4Gemini 可無縫理解和推理各種模態(tài)的輸入內(nèi)容,并非將純文本、純視覺及純音頻模型拼接在一起,后者如 OpenAI 的 GPT-4、DALL·E和 Whisper。根據(jù)谷歌官方的評估,從自然圖像、音頻、視頻理解到數(shù)學(xué)推理,Gemini Ultra 在 32 個常用的學(xué)術(shù)基準(zhǔn)的 30 個上超越GPT-4。在 MMLU(大規(guī)模多任務(wù)語言理解)測試中,Gemini Ultra以 90.0%的高分首次超過人類專家,力壓得分為 86.4%的 GPT-4。在圖像、音頻和視頻等基準(zhǔn)測試中,Gemini Ultra 超越之前的領(lǐng)先模型,且這一成果是在沒有 OCR 系統(tǒng)幫助的情況下實現(xiàn)的,充分體現(xiàn)了 Gemini 原生多模態(tài)的特性。






審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • TPU
    TPU
    +關(guān)注

    關(guān)注

    0

    文章

    154

    瀏覽量

    21196
  • OCR
    OCR
    +關(guān)注

    關(guān)注

    0

    文章

    161

    瀏覽量

    16793
  • GPT
    GPT
    +關(guān)注

    關(guān)注

    0

    文章

    368

    瀏覽量

    16085

原文標(biāo)題:谷歌發(fā)布多模態(tài)Gemini大模型及新一代TPU系統(tǒng)Cloud TPU v5p

文章出處:【微信號:AI_Architect,微信公眾號:智能計算芯世界】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    Android Studio中的Gemini支持模態(tài)輸入功能

    Gemini 現(xiàn)已支持模態(tài)輸入,您可在提示中直接添加圖像!這為團隊協(xié)作和界面開發(fā)工作流程解鎖了更多新的可能性。
    的頭像 發(fā)表于 05-14 16:44 ?492次閱讀

    ??低?b class='flag-5'>發(fā)布模態(tài)模型AI融合巡檢超腦

    基于??涤^瀾大模型技術(shù)體系,??低曂瞥?b class='flag-5'>新一代模態(tài)模型AI融合巡檢超腦,全面升級人、車、行為、事件等算法,為行業(yè)帶來全新的
    的頭像 發(fā)表于 04-17 17:12 ?819次閱讀

    Google推出第七TPU芯片Ironwood

    在 Google Cloud Next 25 大會上,我們隆重推出第 7 Tensor Processing Unit (TPU) — Ironwood。這不僅是我們迄今為止性能最高、擴展性最佳的定制 AI 加速器,更是第
    的頭像 發(fā)表于 04-16 11:20 ?587次閱讀
    Google推出第七<b class='flag-5'>代</b><b class='flag-5'>TPU</b>芯片Ironwood

    谷歌第七TPU Ironwood深度解讀:AI推理時代的硬件革命

    谷歌第七TPU Ironwood深度解讀:AI推理時代的硬件革命 Google 發(fā)布了 Ironwood,這是其第七張量處理單元 (
    的頭像 發(fā)表于 04-12 11:10 ?1828次閱讀
    <b class='flag-5'>谷歌</b>第七<b class='flag-5'>代</b><b class='flag-5'>TPU</b> Ironwood深度解讀:AI推理時代的硬件革命

    谷歌新一代 TPU 芯片 Ironwood:助力大規(guī)模思考與推理的 AI 模型新引擎?

    電子發(fā)燒友網(wǎng)報道(文 / 李彎彎)日前,谷歌Cloud Next 大會上,隆重推出了最新一代 TPU AI 加速芯片 ——Ironwood。據(jù)悉,該芯片預(yù)計于今年晚些時候面向 Go
    的頭像 發(fā)表于 04-12 00:57 ?2421次閱讀

    ??低?b class='flag-5'>發(fā)布模態(tài)模型文搜存儲系列產(chǎn)品

    模態(tài)模型為安防行業(yè)帶來重大技術(shù)革新,基于觀瀾大模型技術(shù)體系,??低晫⒋髤?shù)量、大樣本量的圖文模態(tài)
    的頭像 發(fā)表于 02-18 10:33 ?683次閱讀

    谷歌 Gemini 2.0 Flash 系列 AI 模型上新

    谷歌旗下 AI 大模型 Gemini 系列全面上新,正式版 Gemini 2.0 Flash、Gemini 2.0 Flash-Lite 以
    的頭像 發(fā)表于 02-07 15:07 ?715次閱讀

    黑芝麻智能與Nullmax推出A2000模態(tài)模型智駕方案

    黑芝麻智能宣布與Nullmax共同發(fā)布基于華山系列最新一代芯片A2000的模態(tài)模型智駕方案,以創(chuàng)新獨特的端到端技術(shù)架構(gòu)和高性能自動駕駛S
    的頭像 發(fā)表于 01-09 09:51 ?625次閱讀

    商湯日日新模態(tài)模型權(quán)威評測第

    剛剛,商湯科技日日新SenseNova模態(tài)模型,在權(quán)威綜合評測權(quán)威平臺OpenCompass的模態(tài)評測中取得榜單第
    的頭像 發(fā)表于 12-20 10:39 ?1018次閱讀

    谷歌正式發(fā)布Gemini 2.0 性能提升近兩倍

    在智能體時代,谷歌再次引領(lǐng)技術(shù)潮流,正式發(fā)布了其最新力作——Gemini 2.0。這款A(yù)I模型不僅在性能上實現(xiàn)了顯著提升,更是在
    的頭像 發(fā)表于 12-12 14:22 ?819次閱讀

    谷歌發(fā)布Gemini 2.0 AI模型

    谷歌近日正式推出了新一代AI模型——Gemini 2.0。此次更新引入了名為“深度研究”的新特性,旨在為用戶提供更加全面和深入的復(fù)雜主題探索與報告撰寫輔助。
    的頭像 發(fā)表于 12-12 10:13 ?644次閱讀

    Waymo利用谷歌Gemini模型,研發(fā)端到端自動駕駛系統(tǒng)

    邁新步,為其機器人出租車業(yè)務(wù)引入了種基于谷歌模態(tài)大語言模型(MLLM)“Gemini”的全新
    的頭像 發(fā)表于 10-31 16:55 ?1721次閱讀

    谷歌計劃12月發(fā)布Gemini 2.0模型

    近日,有消息稱谷歌計劃在12月發(fā)布其下一代人工智能模型——Gemini 2.0。這消息引發(fā)了業(yè)
    的頭像 發(fā)表于 10-29 11:02 ?1137次閱讀

    聯(lián)發(fā)科新一代天璣旗艦芯片針對谷歌大語言模型Gemini Nano優(yōu)化

    近日,聯(lián)發(fā)科宣布了個重要的技術(shù)進展——新一代天璣旗艦芯片已經(jīng)針對谷歌的大語言模型Gemini Nano進行了深度優(yōu)化。
    的頭像 發(fā)表于 10-09 16:44 ?820次閱讀

    TPU v1到Trillium TPU,蘋果等科技公司使用谷歌TPU進行AI計算

    電子發(fā)燒友網(wǎng)報道(文/李彎彎)7月30日消息,蘋果公司周篇技術(shù)論文中表示,支撐其人工智能系統(tǒng)Apple Intelligence的兩個人工智能模型是在
    的頭像 發(fā)表于 07-31 01:08 ?3947次閱讀