一鍵部署Llama 3學(xué)習(xí)機(jī),天翼云賦能用戶(hù)輕松玩轉(zhuǎn)大語(yǔ)言模型

近日,Meta公司發(fā)布了其最新研發(fā)成果——開(kāi)源大模型Llama 3,相較于前代產(chǎn)品Llama 2,Llama 3在預(yù)訓(xùn)練數(shù)據(jù)上擴(kuò)大了7倍(達(dá)到15T tokens),在數(shù)據(jù)質(zhì)量與訓(xùn)練方式上也進(jìn)行了深度優(yōu)化。此次發(fā)布的開(kāi)源大模型,包含Llama 3 8B和Llama 3 70B兩種規(guī)格,參數(shù)量級(jí)分別為80億與700億,Meta表示Llama 3是目前同體量下性能最好的開(kāi)源模型,這為開(kāi)源大型語(yǔ)言模型(LLM)領(lǐng)域發(fā)展再次書(shū)寫(xiě)了輝煌篇章。

為了方便廣大AI技術(shù)愛(ài)好者與從業(yè)者快速上手學(xué)習(xí)與使用大語(yǔ)言模型技術(shù),天翼云基于開(kāi)源的Meta-Llama-3-8B-Instruct模型以及text-generation-webui框架,制作了一鍵部署、開(kāi)箱即用的云主機(jī)鏡像。同時(shí),天翼云CPU/GPU云主機(jī)近期即將上線Llama 3大模型學(xué)習(xí)機(jī),期望能夠成為幫助用戶(hù)打開(kāi)大模型領(lǐng)域之門(mén)的第一把鑰匙,讓更多用戶(hù)從此了解大模型、學(xué)習(xí)使用大模型,并利用大模型創(chuàng)造更多可能。

圖片1.jpg

依托天翼云彈性云主機(jī)的優(yōu)勢(shì)與資源性能,用戶(hù)在具體部署操作時(shí)僅需登錄天翼云主機(jī)控制臺(tái),創(chuàng)建云主機(jī),使用指定的規(guī)格與Llama 3鏡像,隨后從瀏覽器登錄到學(xué)習(xí)機(jī)頁(yè)面,便能基于天翼云主機(jī)快速搭建Llama 3的推理或微調(diào)環(huán)境,無(wú)需復(fù)雜配置即可快速體驗(yàn)和應(yīng)用大語(yǔ)言模型。

此外,天翼云Llama 3大模型學(xué)習(xí)機(jī)在一鍵部署的基礎(chǔ)上還提供模型加載、模型推理、推理參數(shù)修改、模型微調(diào)等各類(lèi)功能,包括支持加載主流基于transformers框架的模型,用戶(hù)只需將模型下載并放置到指定目錄下, 無(wú)需其他操作,且鏡像內(nèi)已預(yù)裝Llama 3模型;

支持使用大語(yǔ)言模型進(jìn)行多輪對(duì)話與文本生成,且支持多人同時(shí)使用;支持修改大語(yǔ)言模型在推理時(shí)控制結(jié)果走向的temperature, top_k, top_p等參數(shù);支持基于基礎(chǔ)大模型和私有數(shù)據(jù),微調(diào)訓(xùn)練自己的LoRA小模型,并使用小模型進(jìn)行推理。針對(duì)這些功能,天翼云還配有詳細(xì)的文檔與教學(xué)視頻,助力用戶(hù)打破知識(shí)壁壘,降低學(xué)習(xí)門(mén)檻。

據(jù)了解,天翼云彈性云主機(jī)是天翼云推出的“明星”產(chǎn)品,具備快捷易用、配置豐富、專(zhuān)有網(wǎng)絡(luò)、安全穩(wěn)定、多種鏡像、高效管理和高性?xún)r(jià)比等產(chǎn)品優(yōu)勢(shì),能夠?yàn)橛脩?hù)提供優(yōu)質(zhì)服務(wù)體驗(yàn)。云主機(jī)支持動(dòng)態(tài)調(diào)整計(jì)算資源,提供多種實(shí)例規(guī)格和存儲(chǔ)類(lèi)型,滿足用戶(hù)多元化業(yè)務(wù)需求;擁有靈活自定義的網(wǎng)絡(luò)空間,以及多重安全防護(hù),全面保障數(shù)據(jù)可靠性,助力業(yè)務(wù)批量快速部署。用戶(hù)可以通過(guò)多種管理方式和多維度監(jiān)控實(shí)現(xiàn)高效管理,并可根據(jù)需要靈活選擇計(jì)費(fèi)模式,享受專(zhuān)業(yè)運(yùn)營(yíng)團(tuán)隊(duì)的7*24小時(shí)服務(wù)。此外,天翼云還提供多樣異構(gòu)芯片和計(jì)算模型,為用戶(hù)提供更優(yōu)算力選擇。

當(dāng)前,人工智能技術(shù)與各領(lǐng)域深度融合,成為助推千行百業(yè)創(chuàng)新發(fā)展的重要引擎。天翼云作為全球領(lǐng)先的云服務(wù)商、國(guó)內(nèi)領(lǐng)先的大模型算力服務(wù)商,通過(guò)科技創(chuàng)新持續(xù)為用戶(hù)提供可快速搭建大型模型推理或微調(diào)環(huán)境的解決方案,以及高性能的AI算力集群,將有助于推動(dòng)AIGC產(chǎn)業(yè)實(shí)現(xiàn)高質(zhì)量發(fā)展,加速千行百業(yè)數(shù)字化、智能化升級(jí)。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 )