日前，華為全聯(lián)接大會 2023 在上海召開。華為云 CTO 張宇昕在大會上發(fā)布了基于 Serverless 技術的大模型應用開發(fā)框架，框架以面向 AI 領域全新升級的 FunctionGraph3.0 為核心，將 BaaSforAI后端和開放平臺快速無縫集成，助力企業(yè)輕松商用 AI 應用。

在“全域 Serverless+AI加速應用創(chuàng)新”專題演講上，華為云首席產(chǎn)品官方國偉、華為 2012 實驗室中軟分布式與并行軟件實驗室主任譚焜，分享了 Serverless 和 AI 如何結合的前沿理念和實踐，深度解析華為云在 Serverless 領域核心產(chǎn)品及基于元戎架構構建的分布式內核能力，為開發(fā)者打造 ServerlessAI 極優(yōu)體驗，幫助企業(yè)加速應用創(chuàng)新；廣聯(lián)達科技股份有限公司首席業(yè)務專家/副總裁祁長福分享了在建筑行業(yè)，如何基于華為云 Serverless 產(chǎn)品 FunctionGraph 優(yōu)化 AI 應用開發(fā)，提升交付效率。

全域 Serverless 為千行萬業(yè)深度用云

帶來新體驗

方國偉介紹，在 AI 時代背景下，軟件開發(fā)的方式由以代碼為中心，走向以模型為中心，如何將 AI 大模型能力充分利用起來，是當下云廠商積極探索的事情。

華為云首席產(chǎn)品官方國偉

企業(yè)研發(fā)人員在構建 AIGC 應用時更多關注開發(fā)部署門檻能否降低，更快的完成企業(yè)需求。運維人員要確保系統(tǒng)能夠穩(wěn)定運行，在業(yè)務量高峰時刻做到快速彈性，業(yè)務量小時節(jié)約成本，企業(yè)既能實現(xiàn)業(yè)務目標，又能保證系統(tǒng)可靠性高、成本較低。

為了更好的支撐 AIGC 應用，華為云提供了全域 Serverless 能力，推出了 CCEAutopilot、FunctionGraph、CAE 等 Serverless 產(chǎn)品，將一系列的 AI 原生技術構筑成后端服務，形成 BaaSforAI 能力，調用即可得。結合完善的工具鏈，幫忙企業(yè)快速構建應用。

Serverless容器 CCEAutopilot、CCI 讓用戶無需關注底層資源，自動運維，幫助用戶降低運維成本。

在 CloudBursting 場景，去哪兒網(wǎng)基于 CCI 打造了靈活上云新體驗，完成業(yè)務 0 改造，實現(xiàn) 4000 實例/30s 的極致彈性。

FunctionGraph3.0 八大關鍵能力，

助力 AIGC 應用創(chuàng)新

全新升級的 FunctionGraph3.0，新增 Serverless 應用中心、獨創(chuàng) Snapshot 冷啟動加速、預留實例智能推薦特性，配合異構資源虛擬化技術，實現(xiàn) AIGC 應用低成本、低延遲，加上端到端的全鏈路壓測和全棧可觀測能力，助力 AIGC 應用快速開發(fā)，天級上線。

杭州曼孚科技有限公司是行業(yè)領先的 AI 基礎架構與數(shù)據(jù)智能平臺服務商，基于 FunctionGraph 構建自動化 AI 訓練平臺，更細粒度的 GPU 算力供給加上按需全自動資源彈性，實現(xiàn)成本降低 40%。

華為云 Serverless 事件總線服務事件網(wǎng)格 EventGrid 能夠支持統(tǒng)一事件中心、事件驅動引擎、開放與集成、降低開發(fā)成本四大典型場景，為企業(yè)提供中心化的事件集成、治理和驅動能力。

在車聯(lián)網(wǎng)場景，某 Top 車企使用 EventGrid 構建 Serverless 化的事件驅動架構的同時，實現(xiàn)上下游異步解耦，便于擴展和避免單點故障；作為無碼化對接的事件中心，避免云服務間點對點對接，減少 50%開發(fā)工作量以及數(shù)據(jù)高可靠 0 丟失和數(shù)據(jù)規(guī)則調整 0 變更。降低成本。

Serverless 應用托管 CAE 產(chǎn)品升級：支持應用 0 代碼修改平遷上云，用戶無需修改業(yè)務代碼；支持 Web/微服務應用 Serverless 化，幫助企業(yè)降本增效，提升業(yè)務穩(wěn)定性。

香港新世界旗下廣州新合創(chuàng)科技有限公司，使用 CAE 全托管模式提升 50%效率；后續(xù)還會根據(jù)商場人流峰值設定定時伸縮，節(jié)省資源以降低成本。

BaaSforAI：華為云 BaaS 服務 DWS3.0提供 PayByResource 彈性模式和 PayByQuery 彈性模式，幫助企業(yè)實現(xiàn)后端服務 Serverless 化。

“華為云提供全域 Serverless 能力，讓開發(fā)者 5 倍速開發(fā)行業(yè)大模型，支撐千行萬業(yè)的 AI 應用開發(fā)。面向 AI 領域全新升級的 FunctionGraph3.0，真正實現(xiàn)大模型應用即開即關、即時響應，無限擴展?！?/p>

Serverless挺進AI，

強強聯(lián)合加速 AI 應用創(chuàng)新

華為 2012 實驗室中軟分布式與并行軟件實驗室主任譚焜

基于自主創(chuàng)新元戎內核構建的 FunctionGraph3.0 如何保障 AI 應用開發(fā)部署低成本和響應低時延，譚焜做了深入的技術分享:

模型開發(fā)部署依賴昂貴的異構資源。傳統(tǒng)的異構函數(shù)，CPU 和 XPU 資源綁定分配，單一推理函數(shù)包含 CPU 和 XPU 操作，操作 CPU 時 XPU 空閑，操作 XPU 時 CPU 空閑，資源利用率低。元戎獨創(chuàng)的純 XPU 異構函數(shù)，CPU 和 XPU 資源綁定解耦，用戶可把不同類型資源的操作寫成不同的函數(shù)，執(zhí)行時分解到不同算力處理器上，無閑置資源。

FunctionGraph 打造 ServerlessAI 最佳平臺

在大模型推理場景，包括全量推理和增量推理兩個階段。全量推理階段算力需求遠高于增量推理階段，增量推理階段，耗時可能遠長于全量推理階段。針對這類場景，元戎可以做到全量推理和增量推理解耦，各自按需彈性擴縮，精確算力供給，真正按使用量計費，降低用戶成本。

更快的應用響應速度意味著更好的用戶體驗。元戎自主創(chuàng)新的 FoldFormerAI 模型可在線持續(xù)預測用戶業(yè)務負載，提前進行實例預熱，達到 85%~95%準確率，大大降低了冷啟動概率。無法被準確預測的流量，通過一系列優(yōu)化措施加速冷啟動。在用戶模型下載階段，基于內置的內存數(shù)據(jù)系統(tǒng)和 SSD 構建的分級高速緩存，實現(xiàn)系統(tǒng)內緩存模型文件，大幅縮短下載時間。計算時，模型按 Layer 分批加載，并根據(jù)用戶 SLA 和模型推理時延歷史數(shù)據(jù)構建最優(yōu) pipeline,降低參數(shù)加載和模型推理總時延，冷啟動優(yōu)化到秒級。

譚焜最后總結道：“基于元戎內核，F(xiàn)unctionGraph3.0 提供異構函數(shù)極速冷啟動，細粒度異構資源管理和按需彈性擴縮，打造 ServerlessAI 極低成本和極致性能；依托華為云豐富的 BaaS 服務和全托管的開發(fā)環(huán)境，打造 ServerlessAI 極優(yōu)體驗?！?/p>

AI 賦能建筑行業(yè)數(shù)字化

廣聯(lián)達科技股份有限公司首席業(yè)務專家/副總裁祁長福發(fā)表 AI 賦能建筑行業(yè)數(shù)字化主題演講?！皬V聯(lián)達作為數(shù)字建筑平臺服務商，立足建筑產(chǎn)業(yè)，圍繞工程項目的全生命周期，為客戶提供數(shù)字化解決方案，公司提出“數(shù)字建筑”理念，希望通過“數(shù)字建筑”系統(tǒng)、全面、深度地助力建筑產(chǎn)業(yè)轉型升級?！?/p>

廣聯(lián)達科技股份有限公司首席業(yè)務專家/副總裁祁長福

祁長福介紹，在技術方面，廣聯(lián)達通過大力研發(fā) BIM和云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)、移動互聯(lián)網(wǎng)、人工智能等信息技術引領產(chǎn)業(yè)轉型升級。

在 AI 領域，廣聯(lián)達圍繞行業(yè)難點，圍繞設計、成本、施工等重點領域，打造核心 AI 應用。應用設計采用 Serverless 理念，依托華為云 Serverless 服務構建解決方案，將 AI 模型以鏡像方式部署在 FunctionGraph，對外提供通用 API，無需管理運維異構資源（GPU 等），模型實例隨業(yè)務量全自動擴縮容，無請求時實例縮容到 0，低成本高可用運行。上層應用采用 FaaS+BaaS 的 Serverless 應用架構，集成模型推理接口，只需專注于業(yè)務邏輯代碼，可函數(shù)級粒度并行開發(fā)，快速迭代應用。

華為云 FunctionGraph 技術極大的優(yōu)化了 AI 應用的開發(fā)過程，讓 AI 團隊可以更關注業(yè)務實現(xiàn)，而無需關注底層技術細節(jié)。

“廣聯(lián)達以推動建筑行業(yè)數(shù)字化為己任，著力打造‘數(shù)字+連接+算法’的系統(tǒng)性數(shù)字化。圍繞行業(yè)痛點，我們以智能化技術為基礎，依托華為云 FunctionGraphSeverless 架構，打造建筑從業(yè)人員的 CoPilot，幫助行業(yè)人員提升作業(yè)效率，提高管理水平和決策質量?！?/p>

未來，華為云將持續(xù)落地全域 Serverless 產(chǎn)品，與華為 2012 實驗室深度合作，以 FunctionGraph3.0 為核心，打造 ServerlessAI 極低成本和極致性能，充分滿足大模型應用的敏捷要求，助力千行萬業(yè)深度用云。

審核編輯 黃宇