Linode

阿里雲推出針對Llama 2系列版本的訓練和部署方案

Editor

阿里雲近日宣佈推出了針對Llm 2全系列版本的訓練和部署方案。爲了方便開發者,阿里雲機器學習平臺PAI在國內率先對Llm 2系列模型進行深度適配,推出了輕量級微調、全參數微調、推理服務等場景的最佳實踐方案,助力開發者快速基於Llm 2進行再訓練,搭建自己的專屬大模型。

此外,阿里雲還牽頭髮起了AI模型社區魔搭Modelscope,在該社區上提供了Llm2系列模型,開發者可以在該社區上進行模型開發。

開發者可以在魔搭社區的Llm2模型頁面點擊“Notebook快速開發”,從而一鍵拉起阿里雲機器學習平臺PAI,對模型進行雲上開發和部署。此外,在其他平臺下載的Llm2模型,也可以使用阿里雲PAI進行開發。

在阿里雲上,開發者可以通過輕量級Lo微調或全參數微調來完成Llm2模型的微調。完成微調後,PAI支持開發者通過Web UI及API的方式部署Llm2,使模型可以通過網頁或嵌入應用與使用者交互。

與本地單機訓練Llm2相比,在阿里雲上完成對超大尺寸模型的深度開發更加簡單便捷,而且預置環境免運維,操作簡單,同時開發者可以獲得豐富的AI計算資源和極致彈性。相比之下,本地單卡GPU只能完成Llm270億參數版本的輕量級Lo微調和推理,更大尺寸版本及更深度訓練均很難支撐。

據公開資料顯示,Llm 2在數據層面,相比上一代不僅使用了更多的訓練數據,而且context length翻倍,達到4096。值得一提的是,Llm 2在公開測試基準上的結果顯示,其在代碼、常識推理、世界知識、閱讀理解、數學等評測維度的能力均獲得大幅提升。7B版本在很多測試集上接近甚至有超越30B的MPT模型的表現。


相关文章

  • 亞馬遜雲科技推出全新的Amazon EC2 C7g實例

    亞馬遜雲科技近日宣佈,最新一代的計算優化Amzon EC2 C7g實例已全面推出。C7g實例是最新的AWS Giton3 處理器支持的第一款實例,它與基於Giton 2的C6g實例相比,可將計算密集型工作負載性能提高多達25%。 活動地址:https://www.mzonws.cn/ Amzon E...

  • 阿里雲DDoS防護(增強)EIP購買和出賬模式升級通知

    阿里雲日前宣佈將對DDoS防護(增強)EIP進行購買和出賬模式升級,發佈2.0版本。阿里雲將在2022年2月2日凌晨,計費從.0模式全部切換到2.0模式,此時DDoS防護費用的計費將通過新的商品出賬。如果您在2022年2月2日之前,未完成開通,阿里雲將轉換DDoS防護(增強)EIP到2.0商品進行計...

  • 亞馬遜雲科技中國區域推出Amazon EC2 C6i/M6i/R6i實例

    亞馬遜雲科技中國(北京)區域現已推出Amzon EC2 C6i、M6i和R6i實例。這些實例由第三代英特爾可擴展處理器(代號爲Ice Lke)提供支持,其全核tubo頻率爲3.5 GHz,與同類第5代實例相比,可爲各種工作負載提供高達5%的計算性價比,並使用英特爾總內存加密 (TME) 實現不間斷的...

  • VirtualBox 6.1.32維護版本發佈

    VitulBox正式版是一款免費開源的虛擬機軟件,佔用內存少,操作簡單,可跨平臺運行在Windows、Linux等多種操作系統上,功能強大且性能出色。目前,VitulBox 6..32維護版本發佈,主要更新內容如下: VMM:使用Hype-V時更改了guest RAM管理,以更好地與HVCI兼容(b...

  • HostHatch新加坡VPS上線 年付套餐20美元起

    HostHtch是一家美國主機商,主要提供Linux VPS產品方案,近期新推出了新加坡VPS,使用的是KVM架構 ,基礎配置G內存、0GB SSD空間,年付20美元起,支持PyPl付款。 活動地址:HostHtch官網 本次HostHtch新上線的新加坡VPS方案,可按一年支付,也可選兩年付,如果...

  • Ubuntu 24.04 LTS測試版現可與GNOME 46 Linux 6.8一起下載

    Ubuntu 24.04 LTS(Noble Numbt)操作系統的測試版已推出,將在2024年4月25日最終發佈之前進行公開測試,距離Ubuntu 24.04 LTS版以穩定版本上市僅剩兩週時間,測試版將讓用戶提前瞭解最終版本的一些功能。Ubuntu 24.04 LTS測試版默認帶有最新的GNOM...

  • Linode新的託管數據庫服務已開啓公開測試

    Linode新的託管數據庫服務現已面向新老用戶進行公開測試,該測試版除了支持託管MySQL數據庫,還將添加PostgeSQL、Redis、MongoDB等其他功能。Linode託管數據庫服務能使用戶快速部署高可用性數據庫,並可將維護工作委託給Linode,同時最大限度地減少停機時間,以保證業務正常進...

  • HostKvm業務調整 新加坡VPS方案V1構架下架

    4月25日HostKm宣佈因業務調整計劃於2022年5月0日前取消老舊V構架的新加坡VPS業務,並提供當前穩定性更好、配置更高的KVM VPS。目前新構架已經從207年運營至今,穩定性良好,且能兼容最新的作業系統和提供更強大的功能。由於本次轉移爲面板、虛擬化架構整體轉移,所以原先平臺的數據將無法保留...

  • Vultr計劃推出墨爾本/華沙/馬德里數據中心

    202年還剩不到半個月時間,主機商Vult近日分享了一些有關今年發佈的主要產品更新以及對2022年展望。Vult在國外服務器提供商中一直處於領先地位,擁有高性能計算實例,目前全球有20個數據中心,橫跨了五大洲,另外墨爾本、華沙、馬德里數據中心也在部署中,預計不久後將會上線新方案。 Vult主機商在產...

  • Wine 6.7版本發佈新增ES6 JavaScript模式

    最近WineHQ官網公佈Wine 6.7版本正式上線,本次更新添加了6條功能改進,並可修復微信崩潰等一系列問題。下面來看下Wine 6.7版本主要功能更新內容。 Wine是一箇爲Linux、mcOS和BSD等操作系統構建的兼容層,允許用戶在Linux 、mcOS和BSD系統上運行成千上萬的Windo...