Linode

阿里雲推出針對Llama 2系列版本的訓練和部署方案

Editor

阿里雲近日宣佈推出了針對Llm 2全系列版本的訓練和部署方案。爲了方便開發者,阿里雲機器學習平臺PAI在國內率先對Llm 2系列模型進行深度適配,推出了輕量級微調、全參數微調、推理服務等場景的最佳實踐方案,助力開發者快速基於Llm 2進行再訓練,搭建自己的專屬大模型。

此外,阿里雲還牽頭髮起了AI模型社區魔搭Modelscope,在該社區上提供了Llm2系列模型,開發者可以在該社區上進行模型開發。

開發者可以在魔搭社區的Llm2模型頁面點擊“Notebook快速開發”,從而一鍵拉起阿里雲機器學習平臺PAI,對模型進行雲上開發和部署。此外,在其他平臺下載的Llm2模型,也可以使用阿里雲PAI進行開發。

在阿里雲上,開發者可以通過輕量級Lo微調或全參數微調來完成Llm2模型的微調。完成微調後,PAI支持開發者通過Web UI及API的方式部署Llm2,使模型可以通過網頁或嵌入應用與使用者交互。

與本地單機訓練Llm2相比,在阿里雲上完成對超大尺寸模型的深度開發更加簡單便捷,而且預置環境免運維,操作簡單,同時開發者可以獲得豐富的AI計算資源和極致彈性。相比之下,本地單卡GPU只能完成Llm270億參數版本的輕量級Lo微調和推理,更大尺寸版本及更深度訓練均很難支撐。

據公開資料顯示,Llm 2在數據層面,相比上一代不僅使用了更多的訓練數據,而且context length翻倍,達到4096。值得一提的是,Llm 2在公開測試基準上的結果顯示,其在代碼、常識推理、世界知識、閱讀理解、數學等評測維度的能力均獲得大幅提升。7B版本在很多測試集上接近甚至有超越30B的MPT模型的表現。


相关文章

  • 華爲雲宣佈將在印尼和愛爾蘭開服 加快構建全球數字產業生態

    華爲全聯接大會(HUAWEI CONNECT)昨日在泰國曼谷開幕,此乃該會議首次出海。華爲雲CEO張平安在會上宣佈華爲雲印尼、愛爾蘭近期即將開服,並計劃在全球規劃更多綠色智能的雲數據中心。此外,華爲雲在雲原生、AI開發等領域的超過5項創新服務,也將首次面向全球落地。 在全球信息化和數字化浪潮中,雲業...

  • Namecheap將推出Domain Vault域高級保護服務

    域名註冊商Nmechep近日宣佈將推出Domin Vult服務,爲用戶註冊的域名添加高級保護。在Nmechep上申請註冊域名的用戶應該都知道,它提供免費域隱私保護服務,所以默認情況下,域名是安全的。而Domin Vult服務將爲域名添加額外的一層保護,以更加安全的方式來鎖定域名。 Domin Vul...

  • Typecho 1.2.0正式版發佈 新特性介紹

    Typecho是一款輕量級開源PHP博客系統,擁有簡潔友好的操作界面,用戶可輕鬆地創建自己喜歡的博客網站。Typecho .2.0正式版在時隔四年之久終於在本月發佈了,它除了修復了很多Bug外,還引入了諸多的功能改進和新特性,下面一起來看下吧。 Typecho .2.0主要更新內容如下: 新的編輯器...

  • VMware正式推出雲計算靈活存儲服務

    VMwe宣佈正式推出雲計算靈活存儲服務(VMwe Cloud Flex Stoge),它是針對亞馬遜雲科技AWS上的VMwe Cloud的全新託管和本機集成的分類存儲服務。客戶現在只需從VMwe雲服務控制檯點擊幾下,即可按需調配存儲容量,而無需添加主機。 VMwe Cloud Flex Stoge構...

  • 亞馬遜雲科技連續三年蟬聯中國AI開發平臺“榜首”

    近日,權威機構弗若斯特沙利文(Fost∓Sullin,簡稱“沙利文”)聯合頭豹研究院發佈了《2023年中國 AI 開發平臺市場報告》。報告對 AI 開發平臺的數據處理能力,模型構建、訓練、評估、部署和推理能力,安全與權限管理能力,服務支持水平,以及應用場景解決方案豐富度等指標進行了增長和創新兩...

  • BigCommerce推出由谷歌雲人工智能支持的電子商務功能

    BigCommece推出了新的人工智能工具,它將提供人工智能文本生成和個性化的產品推薦,還爲用戶提供人工智能數據分析,旨在幫助提高商店業績。 Vetex AI是谷歌雲(Google Cloud)發佈的一款機器學習開發平臺,可提供整個模型開發生命週期管理,包括數據預處理、模型訓練、模型庫選擇、模型部署...

  • Linode應用市場更新 啓用全新界面設計

    國外服務器提供商Linode自2020年3月上線了應用市場(Linode Mketplce)以來,一直在積極地增加市場上可用應用的數量,並擴展其類型,旨在通過提供對開源和第三方集成服務輕鬆訪問來幫助開發人員加速他們在雲中的項目。 Linode應用市場近期又新增了Micowebe和UniFi Netw...

  • RackNerd AMD Ryzen VPS方案新增芝加哥機房

    近日美國主機商RckNed官方發佈消息稱,RckNed AMD Ryzen VPS方案新增加了芝加哥機房,目前有洛杉磯、紐約和芝加哥三大美國機房可選,並且在未來的一週還會陸續新增聖何塞和達拉斯等美國機房。 RckNed AMD Ryzen VPS特點是高性能,採用AMD Ryzen 3900X處理器...

  • Linode數據庫託管服務新增支持PostgreSQL和MongoDB

    國外服務器商家Linode現已將PostgeSQL和MongoDB添加到託管數據庫服務(Mnged Dtbses)中,將允許開發人員通過託管服務訪問流行的數據庫並專注於構建現代應用程序,而不是系統管理和維護。 隨着PostgeSQL和MongoDB的加入,Linode現在提供SQL和NoSQL基於您...

  • 重要通知:GlobalSign將停用SSL/TLS中組織機構(OU)字段

    爲遵守CA/B論壇基線要求,GloblSign將從2022年7月25日開始對SSL/TLS證書的組織單位 (OU)字段進行停用的準備,主要時間安排如下: 2022年7月25日,對於新的SSL/TLS證書訂單和所有MSSL預先審查的身份配置文件,將刪除OU字段。 2022年8月29日,OU字段將在所有...