Linode

阿里雲推出針對Llama 2系列版本的訓練和部署方案

Editor

阿里雲近日宣佈推出了針對Llm 2全系列版本的訓練和部署方案。爲了方便開發者,阿里雲機器學習平臺PAI在國內率先對Llm 2系列模型進行深度適配,推出了輕量級微調、全參數微調、推理服務等場景的最佳實踐方案,助力開發者快速基於Llm 2進行再訓練,搭建自己的專屬大模型。

此外,阿里雲還牽頭髮起了AI模型社區魔搭Modelscope,在該社區上提供了Llm2系列模型,開發者可以在該社區上進行模型開發。

開發者可以在魔搭社區的Llm2模型頁面點擊“Notebook快速開發”,從而一鍵拉起阿里雲機器學習平臺PAI,對模型進行雲上開發和部署。此外,在其他平臺下載的Llm2模型,也可以使用阿里雲PAI進行開發。

在阿里雲上,開發者可以通過輕量級Lo微調或全參數微調來完成Llm2模型的微調。完成微調後,PAI支持開發者通過Web UI及API的方式部署Llm2,使模型可以通過網頁或嵌入應用與使用者交互。

與本地單機訓練Llm2相比,在阿里雲上完成對超大尺寸模型的深度開發更加簡單便捷,而且預置環境免運維,操作簡單,同時開發者可以獲得豐富的AI計算資源和極致彈性。相比之下,本地單卡GPU只能完成Llm270億參數版本的輕量級Lo微調和推理,更大尺寸版本及更深度訓練均很難支撐。

據公開資料顯示,Llm 2在數據層面,相比上一代不僅使用了更多的訓練數據,而且context length翻倍,達到4096。值得一提的是,Llm 2在公開測試基準上的結果顯示,其在代碼、常識推理、世界知識、閱讀理解、數學等評測維度的能力均獲得大幅提升。7B版本在很多測試集上接近甚至有超越30B的MPT模型的表現。


相关文章

  • 通知:Swarm宣佈測試節點可直接併入主網 無需質押

    Swm 宣佈測試節點可直接併入主網,且在主網啓動後的一段時間裏,測試網可能與主網並存。 據悉Swm即將主網上線,屆時6月3日將“軟啓動”,可以理解爲非同一般的主網啓動, 這是一種漸進式的啓動,就猶如百度百科上的定義:”電壓由零慢慢提升到額定電壓,電機在啓動過程中啓動電流,並且可根據需要調節啓動電流的...

  • Fedora Linux 37 Beta測試版發佈

    Fedo項目近日發佈了Fedo Linux 37 Bet測試版本,我們可通過其官方網站下載並測試相關性能,接下來的Fedo Linux 37正式版預計會在0月底發佈。 Fedo 37 Woksttion測試版將會使用GNOME 43桌面。GNOME 43在設置中包含了一箇新的設備安全面板,爲用戶提供...

  • 騰訊雲多款核心雲產品降價 最高降幅達40%

    騰訊雲近日宣佈對多款核心雲產品降價,部分產品線最高降幅達40%,降價政策將在6月日正式生效。具體來看,此次降價計劃中,騰訊雲將針對部分區域雲服務器實例特惠時長進一步加大折扣力度,價格降幅最高將達40%。 在雲網絡方面,騰訊雲對負載均衡CLB的LCU費降價8%,對標準型NAT網關降價5%,以更低價格普...

  • Vultr宣佈推出全託管式PostgreSQL數據庫服務

    海外服務器提供商Vult近日宣佈推出全託管式PostgeSQL數據庫服務,以滿足用戶多樣化數據庫託管需要。Vult目前已提供MySQL和PostgeSQL數據庫託管服務,未來還可能會增加更多主流數據庫支持。 PostgeSQL是一箇非常高級的、可擴展的開源對象關係數據庫,通常因其可靠性、功能集和性能...

  • FileZilla Server 1.6.0和1.6.1發佈

    FileZill See是一款開源、免費的FTP客戶端服務器端的項目,具有高安全性和高性能特性。FileZill See .6.0和.6.現已發佈,引入了多項功能,並對發現的錯誤和漏洞進行了修復,主要更新內容如下。 一、FileZill See .6.0 新的功能: UI:現在可以使用協議配置的安全...

  • 阿里云云原生產品名稱將於2023年5月22日起進行批量變更

    阿里雲日前發佈通知,自2023年5月22日起,阿里云云原生產品名稱進行批量變更,涉及中文產品系列的統一化和英文書寫的規範化修訂,變更後所有相關產商品將使用新名稱。相關信息如下: 、阿里雲可觀測系列產品標準命名,中文名變更爲“可觀測**版“,英文名變更爲“Mnged Seice fo**”,涉及到3個...

  • Amazon ECS已支持更快地啓動新任務

    Amzon Elstic Contine Seice(Amzon ECS)現在可以在有任務需要較長時間才能關閉的容器實例上更快地啓動任務。這使客戶能夠更快地擴展其工作負載並提高基礎設施利用率。 Amzon ECS是亞馬遜雲科技推出的一項完全託管的容器編排服務,它使您能夠輕鬆部署、管理和擴展容器化的應...

  • DigitalOcean宣佈與MongoDB合作推出全新的DBaaS產品

    DigitlOcen今天宣佈將與 MongoDB 展開合作,推出 DigitlOcen Mnged MongoDB,這是一箇全新的管理型數據庫即服務(DBS)產品。它將主要提供給應用程序開發人員和中小型企業。 管理型 MongoDB 可以幫助開發人員在 DigitlOcen 上輕鬆創建 MongoD...

  • Vultr計劃爲下一代人工智能應用提供NVIDIA L40S GPUs支持

    美國主機商Vult近日宣佈旗下GPU雲服務器產品新增NVIDIA L40S GPUs支持,將強大的AI計算性能與出色的圖形和媒體加速功能相結合,可爲用戶提供突破性的多工作負載性能體驗。 Vult目前在全球部署有32個數據中心,主要分佈在北美洲、拉丁美洲、歐洲、亞洲、澳大利亞和非洲地區,您可根據目標受...

  • iON Cloud雲服務器將新增達拉斯/檀香山/華盛頓/紐約機房

    iON Cloud是國外服務器商家Kypt推出的VPS雲服務器子品牌,官網支持中英文語言切換,旗下的雲服務器產品性能優越,深受國內站長青睞。iON Cloud雲服務器套餐目前有洛杉磯、聖何塞、新加坡機房可選,近日發現又新增了達拉斯/檀香山/紐約/華盛頓機房選項,目前正在籌備中,相信過不了多久就會上線...