Linode

騰訊混元大模型正式亮相

Editor

9月7日,在2023騰訊全球數字生態大會上,騰訊混元大模型正式亮相,並通過騰訊雲對外全面開放。

據悉,混元大模型是由騰訊全鏈路自研的通用大語言模型,擁有超千億參數規模,預訓練語料超2萬億tokens。據騰訊集團副總裁蔣傑介紹,該大模型是從零開始訓練,公司掌握了從模型算法到機器學習框架,再到AI基礎設施的全鏈路自研技術,具備強大的中文創作能力,複雜語境下的邏輯推理能力,以及可靠的任務執行能力。

騰訊混元大模型具有強大的中文理解與創作能力、邏輯推理能力,以及可靠的任務執行能力,在解決大模型常見的“幻覺”問題上取得了明顯進步。針對大模型容易“胡言亂語”的問題,騰訊優化了預訓練算法及策略,讓混元大模型的幻覺相比主流開源大模型降低了30%至50%。

同時,通過強化學習的方法,讓模型學會識別陷阱問題,可以拒絕回答不恰當的用戶問題;通過位置編碼優化,提高了超長文的處理效果和性能。

目前混元大模型已經接入騰訊50多箇業務,包括騰訊雲、騰訊廣告、騰訊遊戲、騰訊會議、騰訊文檔、微信搜一搜和QQ瀏覽器等業務和產品,同時取得了不錯的效果。

未來它將作爲騰訊雲MS服務的底座,客戶不僅可以直接通過API調用混元,也可以將混元作爲基底模型,開發不同產業場景的應用。


相关文章

  • Vultr學習路徑:進入生成AI的旅程

    歡迎來到生成式人工智能(AI)領域,在這裏機器成爲創造者和創新者。這條學習路徑探索了複雜的機制,使Vult開發人員能夠將生成智能集成到他們的應用程序中,從而徹底改變Vult與技術的交互方式。從基本原理到高級模型,如羊駝2,穩定擴散和耳語,本課程使您能夠在項目中釋放AI的力量。 關於生成式AI 生成式...

  • Amazon ECS優化型Amazon Linux 2022 AMI現已推出預覽版

    Amzon ECS優化型Amzon Linux 2022系統映像(AMI)現已推出預覽版,它是Amzon Web Seices(AWS)的新一代Amzon Linux,專用於爲開發和運行雲應用程序提供安全、穩定和高性能執行環境。 從AL2022起,新的Amzon Linux主要版本將每兩年推出一次,...

  • 亞馬遜雲科技Amazon SageMaker推出多項新功能

    亞馬遜雲科技在2022 e:Inent全球大會上宣佈,爲端到端機器學習服務Amzon SgeMke推出八項新功能。Amzon SgeMke是一項完全託管的機器學習服務,通過使用該服務,數據科學家和開發人員可以快速、輕鬆地構建和訓練機器學習模型,然後直接將模型部署到生產就緒的託管環境中。 亞馬遜雲科技...

  • Elementor 3.15 Beta發佈 新功能搶先看

    Elemento 3.5 Bet發佈,這次更新包含了許多新功能和改進,如帶有功能強大的新分類過濾器小部件、改進的具有嵌套功能的手風琴小部件以及人工智能支持的圖像背景移除等。Elemento 3.5 Bet是測試版本,您可以在WodPess測試站點上體驗該版本功能。 點擊訪問:Elemento官網 新...

  • Windows 11最新FAQ 回滾時間縮短爲10天

    距離微軟推出 Windows 首個預覽版本已經快 2 周了,與 Windows 0 相比,Windows 變化巨大,特別是在 UI 方面。而近日微軟發佈的一份 Windows FAQ 包含了更多相關信息,以下是其亮點內容: 、如果不喜歡 Windows,升級後可以回滾到 Windows 0 嗎? 可...

  • 阿里雲通義千問7B模型開源 可免費商用

    阿里雲近日宣佈開源通義千問70億參數模型,包括通用模型Qwen-7B和對話模型Qwen-7B-Cht,兩款模型均已上線ModelScope魔搭社區,開源、免費、可商用。至此,阿里雲稱已經成爲國內首個開源自家大模型的大型科技企業。 Qwen-7B是支持中、英等多種語言的基座模型,在超過2萬億token...

  • Joomla 3.9.27新版本發佈 3個安全漏洞已修復

    Jooml 3.9.27版本已正式上線發佈。這是Jooml 3 . x系列的安全版本,解決了3個安全漏洞,包含5個以上的錯誤修復和改進。 Jooml 3.9.27包括3個安全漏洞修復,並解決了幾個錯誤,包括: 安全問題已修復 [202050]低嚴重性-低影響-在MediHelpe::cnUplod的...

  • Megalayer海外服務器支持在線選擇附加RapidSSL證書

    Meglye訂單系統最近又上線了新功能,我們選購海外服務器時,現在可以直接在配置欄選擇附加RpidSSL證書,以啓用https加密,提高網站安全防護,保護用戶隱私信息安全。 Meglye主機商起初是以香港/新加坡/菲律賓/美國服務器租賃等服務爲主要業務,爲了給用戶帶來更優質的網站服務,近日又上線了S...

  • InMotionHosting在歐洲推出首個數據中心 落戶荷蘭阿姆斯特丹

    InMotionHosting近日宣佈在歐洲推出首個國際數據中心,落戶荷蘭阿姆斯特丹,以擴大了其業務範圍,爲歐洲或周邊地區用戶提供更優質的託管體驗。未來幾個月,InMotionHosting的所有產品線都將在新的歐洲數據中心提供。 InMotionHosting專門建造的三層數據中心位於荷蘭阿姆斯特...

  • GlobalSign恢復頒發爲期3年的安全電子郵件和個人簽名證書

    GloblSign曾於202年2月6日發佈了《即將停止頒發爲期3年的安全電子郵件和個人簽名證書》的通知, 該通知是爲了響應蘋果公司在202年2月日的“根”策略,該策略曾計劃於2022年4月日執行。 然而,在2022年月28日,蘋果公司調整了其“根”策略,GloblSign也即日起恢復頒發爲期3年的安...