日前,華為云·云容器實(shí)例(CCI)全球首發(fā)基于K8S的serverless GPU加速型容器實(shí)例。這是繼華為云在全球首發(fā)基于K8S的容器實(shí)例后,為容器實(shí)例服務(wù)提供更豐富的計(jì)算選擇,給關(guān)注AI、視頻處理等高性能計(jì)算的企業(yè)和開發(fā)者帶來更多的玩法。
AI算力需求迎來爆發(fā)式增長(zhǎng)
以AI場(chǎng)景為例,OpenAI發(fā)布研究報(bào)告,透露2012年到2018年6年間單次AI訓(xùn)練的計(jì)算量增加30萬倍,這意味著訓(xùn)練計(jì)算量每3.5個(gè)月翻倍,是摩爾定律的5倍。同時(shí),AI正在向各行各業(yè)普及,因此AI算力的需求會(huì)出現(xiàn)爆炸式增長(zhǎng)。公有云因?yàn)榈统杀镜挠布?、無需關(guān)注基礎(chǔ)設(shè)施、0交付周期的優(yōu)勢(shì),是客戶在有AI算力需求時(shí)是更好的選擇。
隨著容器技術(shù)逐漸被各個(gè)領(lǐng)域開發(fā)者接受,大家發(fā)現(xiàn)容器技術(shù)可以提供標(biāo)準(zhǔn)化的容器打包,解決AI場(chǎng)景中不同工具對(duì)環(huán)境的依賴。用戶在搭建深度學(xué)習(xí)訓(xùn)練環(huán)境,需要準(zhǔn)備帶GPU的機(jī)器,安裝python,tensorflow,GPU驅(qū)動(dòng)等,如果要從開發(fā)環(huán)境到測(cè)試環(huán)境,再?gòu)臏y(cè)試環(huán)境到生成環(huán)境,涉及環(huán)境遷移過程中如何保證環(huán)境的一致性。然而容器帶來的標(biāo)準(zhǔn)化打包能力可以提供了絕佳的解決方案,可以極大降低AI平臺(tái)的復(fù)雜度,做到多訓(xùn)練框架并存、大幅簡(jiǎn)化生產(chǎn)環(huán)境部署。
目前K8S已經(jīng)成為業(yè)界最主流的容器管理平臺(tái),它提供靈活的編排調(diào)度系統(tǒng),可以滿足大規(guī)模、高并發(fā)的AI分布式訓(xùn)練,大幅提高訓(xùn)練速度。因此,公有云GPU容器實(shí)例對(duì)AI用戶的吸引力越來越高。
華為云·GPU加速型云容器實(shí)例
華為云·云容器實(shí)例本次發(fā)布的GPU加速型容器實(shí)例本質(zhì)是在Serverless K8S的基礎(chǔ)上提供GPU算力,這兩個(gè)技術(shù)的結(jié)合給AI、基因、視頻處理等場(chǎng)景帶來不一樣的體驗(yàn)。
免運(yùn)維。相比傳統(tǒng)租用云服務(wù)器、甚至自建IDC,GPU加速型容器實(shí)例無需客戶維護(hù)集群、考慮集群的升級(jí)、社區(qū)bug修復(fù)、集群資源利用率等問題,直接購(gòu)買和管理GPU容器實(shí)例。同時(shí),CCI提供了可視化的pod CPU/MEM/GPU監(jiān)控功能,可以實(shí)時(shí)監(jiān)控處理過程,極大的簡(jiǎn)化運(yùn)維成本。
高性能。華為云GPU加速型云容器實(shí)例支持秒級(jí)伸縮和高并發(fā),kata容器啟動(dòng)速度實(shí)測(cè)600ms,集群規(guī)模高達(dá)上十萬容器實(shí)例,讓客戶快速利用GPU實(shí)例實(shí)現(xiàn)分布式計(jì)算。例如,華為云EI使用該GPU容器實(shí)例,在斯坦福大學(xué)DAWNBench測(cè)試中取得前兩名的好成績(jī),并達(dá)到0.8+的GPU線性加速比。
低成本。很多高性能計(jì)算時(shí)長(zhǎng)非常靈活,以AI訓(xùn)練為例,很多場(chǎng)景下,客戶需要快速、多次計(jì)算進(jìn)行迭代。華為云GPU加速型云容器實(shí)例提供按需按秒計(jì)費(fèi),讓客戶真正按業(yè)務(wù)計(jì)算市場(chǎng)進(jìn)行消費(fèi),避免包年包月帶來的高成本。
華為云·GPU加速型云容器實(shí)例在Serverless K8S上展現(xiàn)了免運(yùn)維、高性能、低成本算力的優(yōu)勢(shì),逐步成為解決AI場(chǎng)景中各種環(huán)境問題的利器。未來也將在AI、基因、視頻處理等行業(yè),為高性能計(jì)算的企業(yè)和開發(fā)者提供更加高效,安全、低成本的公有云服務(wù)。
- 新能源車銷量回暖:比亞迪領(lǐng)跑零跑破界,市場(chǎng)新格局重塑
- 騰訊會(huì)議崩了熱搜榜:工程師緊急修復(fù),網(wǎng)絡(luò)無小事,用戶心更懸!
- 鏈接社交與商業(yè),未來已來!通通AI集團(tuán)2024年?duì)I收破2.6億,引領(lǐng)行業(yè)新篇章
- 蔚來第三品牌螢火蟲內(nèi)飾設(shè)計(jì):打破常規(guī),創(chuàng)新設(shè)計(jì)引人矚目
- 文心一言、文小言APP會(huì)員退費(fèi):理智退訂,重獲自由
- 騰訊會(huì)議崩了上熱搜,官方回應(yīng)網(wǎng)友回復(fù),網(wǎng)友:這波操作亮了!
- 李斌與沈斐接手樂道:從銷售基本功出發(fā),打造新銷售策略,助力企業(yè)騰飛
- 賈躍亭宣布:6月發(fā)布首款FX車型,年內(nèi)首車下線并創(chuàng)收,驚呆眾人!
- 未來AI記憶大突破:微軟CTO預(yù)測(cè)智能體記憶將超越人類,改變世界
- 2025年AI硬件支出激增:80%資金流向揭示未來AI新格局
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。