Linode

阿里雲推出針對Llama 2系列版本的訓練和部署方案

Editor

阿里雲近日宣佈推出了針對Llm 2全系列版本的訓練和部署方案。爲了方便開發者,阿里雲機器學習平臺PAI在國內率先對Llm 2系列模型進行深度適配,推出了輕量級微調、全參數微調、推理服務等場景的最佳實踐方案,助力開發者快速基於Llm 2進行再訓練,搭建自己的專屬大模型。

此外,阿里雲還牽頭髮起了AI模型社區魔搭Modelscope,在該社區上提供了Llm2系列模型,開發者可以在該社區上進行模型開發。

開發者可以在魔搭社區的Llm2模型頁面點擊“Notebook快速開發”,從而一鍵拉起阿里雲機器學習平臺PAI,對模型進行雲上開發和部署。此外,在其他平臺下載的Llm2模型,也可以使用阿里雲PAI進行開發。

在阿里雲上,開發者可以通過輕量級Lo微調或全參數微調來完成Llm2模型的微調。完成微調後,PAI支持開發者通過Web UI及API的方式部署Llm2,使模型可以通過網頁或嵌入應用與使用者交互。

與本地單機訓練Llm2相比,在阿里雲上完成對超大尺寸模型的深度開發更加簡單便捷,而且預置環境免運維,操作簡單,同時開發者可以獲得豐富的AI計算資源和極致彈性。相比之下,本地單卡GPU只能完成Llm270億參數版本的輕量級Lo微調和推理,更大尺寸版本及更深度訓練均很難支撐。

據公開資料顯示,Llm 2在數據層面,相比上一代不僅使用了更多的訓練數據,而且context length翻倍,達到4096。值得一提的是,Llm 2在公開測試基準上的結果顯示,其在代碼、常識推理、世界知識、閱讀理解、數學等評測維度的能力均獲得大幅提升。7B版本在很多測試集上接近甚至有超越30B的MPT模型的表現。


相关文章

  • Linux 6.9-rc1內核測試版發佈 多項功能改進

    支持Ubuntu等Linux發行版系統內核依舊在不斷改進和開發,Linux 6.9是下一個主要的內核系列,今天官方發佈了第一個公開測試的候選版本(RC),距離發佈Linux 6.8已經過去兩週了,Linux內核6.9的合併窗口現已關閉。 Linux內核6.9對AMD GPU圖形驅動程序進行更多改進,...

  • Hostinger CDN測試版功能搶先看

    Hostinge CDN測試版將很快提供給使用英國、美國、新加坡、巴西和法國數據中心的商業虛擬主機及以上的客戶。Hostinge CDN是Hostinge推出的內部CDN解決方案,這一全新的測試版功能適用於商務虛擬主機及以上級別的客戶,顯著提高了網站的性能和安全性。 Hostinge CDN定製功能...

  • Amazon ElastiCache新的控制檯現已在所有AWS區域推出

    Amzon ElstiCche新的控制檯現已在所有AWS區域推出。新控制檯爲用戶提供了一種直觀的方式來管理ElstiCche資源,導航更簡單,上下文信息更豐富,幫助用戶更快地執行任務,另外它還提供了與其他AWS服務控制檯更一致的外觀。 新的Amzon ElstiCche控制面板提供了最重要的操作、資...

  • 騰訊雲第六代雲服務器上線 限時內測正在進行

    近日騰訊雲第六代雲服務器上線,騰訊雲基於第三代英特爾至強可擴展處理器帶來更強的算力體驗。目前騰訊雲第六代雲服務器上線三款全新產品,分別爲騰訊雲標準型 S6、騰訊雲內存型M6和騰訊雲計算型C6,三款產品正式邀測正在進行中。 一、騰訊雲第六代雲服務器優勢 、產品性能提升 在騰訊網關場景下,性能提升最大高...

  • Ubuntu 22.10新特性介紹 啓用全新的桌面功能

    Ubuntu 22.0 “Kinetic Kudu”將於2022年0月20日發佈,該版本包含了全新的桌面功能、新的默認聲音系統和廣受歡迎的Linux內核升級,還有其他一些新特性和功能。 Ubuntu 22.0新特性介紹: 、快速設置 GNOME 43是Ubuntu 22.0版本的核心,它採用新的基於...

  • 百度統計工具搜索詞排名新上線指定搜索詞功能

    百度統計是百度推出的一款免費專業網站流量分析工具,相信不少站長在運營網站過程中會通過百度統計來定期查看網站搜索詞排名,瞭解瀏覽量、訪客數等數據,以便進行SEO優化。近期百度統計搜索詞排名部分,新上線了指定搜索詞功能,方便站長通過添加指定的搜索詞快速查看到相關的分析數據。 如何給網站指定搜索詞 百度搜...

  • FastComet主機如何檢查電子郵件帳戶大小?

    大家在租用FstComet主機之後,都會有綁定的郵件,這樣可以及時接受到FstComet最新通知等情況,但是電子郵件賬戶也有大小之分,所以瞭解電子郵件賬戶大小就很有必要,本文來介紹一下FstComet主機如何檢查電子郵件帳戶大小?一起來學習一下吧! 要獲取所有電子郵件帳戶及其各自大小的列表,首先登錄...

  • RackNerd AMD Ryzen VPS新增聖何塞機房 低至$14.18/年

    今天知名美國主機商RckNed官方發佈消息稱RckNed AMD Ryzen VPS新增聖何塞機房,現在有洛杉機、紐約州、芝加哥、西雅圖和聖何塞五大機房可以選擇,最低只需$4.8/年起,支持支付寶付款。 衆所周知一直以來AMD Ryzen VPS專爲高性能市場定製,採用銳龍3900X處理器,提供卓越...

  • Linode增強圖像功能正在測試階段

    近日,Linode發佈了針對所有客戶和數據中心的圖像功能的重大改進(bet版可用)。Linode一直支持開發者在Linodes上輕鬆提供圖片快照服務,現在用戶已經可以通過雲管理器、API或CLI上傳自己的圖片,並利用每個帳戶的擴展存儲容量。 更新後的Imge服務顯著減少了供應Linodes的開銷,並...

  • Akamai Linode宣佈2023年底前即將新增十幾個機房

    2月份CDN服務提供商Akmi收購基礎設施即服務平臺提供商Linode,近日Akmi Linode宣佈2023年底前即將新增十幾個機房。Akmi Linode2023年底前在北美、亞太地區、拉丁美洲和歐洲增加十多個新數據中心,第一個新增機房將在弗吉尼亞州的阿什本,2023年將陸續增加阿姆斯特丹、欽奈...