Meta 今(19)日發表新一代的開源大型語言模型 Llama 2,將免費提供研究與商業使用,並與微軟攜手拓展長期合作夥伴關係。
Meta 現已完成分享 Llama 2 新版本並開放用於商業用途的相關準備,包括預訓練模型與對話式的微調版本的模型權重與起始代碼,並與微軟將進一步提升合作關係,微軟成為 Meta 在 Llama 2 與拓展生成式 AI 成果的首選合作夥伴。
即日起,Llama 2 將在 Azure AI 模型目錄中上線,使開發人員可以運用 Microsoft Azure 構建並利用其雲端原生工具開展內容過濾與安全功能;Llama 2 也針對 Windows 本機執行進行優化,讓開發者在提供生成式 AI 體驗給不同平台客戶時,擁有無縫的工作流程;Llama 2 也將可透過 Amazon Web Services(AWS)、Hugging Face 予其他夥伴取得。
大家與企業將從 Microsoft 與 Meta 間的長期合作夥伴關係中受益,兩家公司共同為可互換 AI 框架推出開放生態系統,並為了推動 AI 的發展共同撰寫相關研究論文。此外,雙方的合作也擴大 PyTorch 在 Azure 上的應用。PyTorch 是由 Meta 與 AI 社群創建且領先業界的 AI 框架,Meta 也是 PyTorch 基金會創始成員之一。微軟與 Meta 近期加入許多認同 AI 框架夥伴關係的支持者,一起創建與共享合成媒體內容。合作夥伴關係將拓展至 AI 領域之外,甚至延伸至元宇宙中,為未來的工作及娛樂提供身歷其境的體驗。
透過擴大合作夥伴關係,微軟與 Meta 目前支持開放式的創新態度,將增加對基礎 AI 技術的使用,進而造福全球企業。不只 Meta 與微軟相信普及化可促進 AI 模型的進步,在世界各地也有廣泛的支持者,包括早期運用 Llama 2 建構新產品並分享回饋的公司、將 Llama 2 納入客戶服務產品中的雲端服務供應商、致力於與 Meta 共同安全地及負責任地開展大型生成模型的研究機構,還有與 Meta 一樣預見未來效益的科技、學術與政策領域等人士。
聚焦於負責任地開發
開源將促進 Llama 2 的透明度與可獲取性。AI 為社會帶來顯著的進步,但也伴隨著風險,因此 Meta 承諾將負責任地構建並提供大量資源協助使用 Llama 2 的開發者。
紅隊演練(Red-Teaming Exercises):在內部與外部努力下,Meta 的微調模型已通過紅隊演練安全測試。團隊致力於生成對抗式指令(prompts)來進行模型微調。此外,Meta 委託第三方對經過微調的模型進行外部對抗性測試,以類似方式識別性能上的不足。這些安全微調過程是不斷迭代的;Meta 將繼續透過微調與基準測試,投入於安全性的提升,並基於這些努力發布更新的微調模型。
透明度示意圖:解釋對於模型的微調與評估方式,並確認其缺陷。在研究論文中,Meta 的透明度示意圖揭露過去所經歷過的已知挑戰與問題,並提供曾採取的緩解措施,以及未來計畫探索的解決方式。
負責任的使用指南:Meta 建立一套指南,與開發者分享負責任地開發與安全評估的最佳實踐方式。指南概述在業界與 AI 研究社群間,所討論出目前關於負責任生成式 AI 的最佳研究方式。
可接受的使用政策:Meta 制定了禁止某些案例的政策,以確保這些模型得以公平且負責任地被使用。
Meta 也開展新方式,運用全球各地的個人、研究人員、開發者的洞察力與創造力,收集關於模型表現成效及如何改進的回饋。
開放創新 AI 研究社群:Meta 更為學術研究人員啟動新的合作夥伴計劃,企盼更進一步瞭解大型語言模型的負責任開發與共享。研究人員可以申請加入從業者社群,分享重要主題的相關經驗,社群將制定研究議程來推動未來的發展。
Llama 影響力挑戰賽:Meta 期待活絡積極使用 Llama 解決難題的創新社群,Meta 發起挑戰賽,鼓勵各種大眾、非營利組織與營利單位,運用 Llama 2 應對氣候、教育及其他相關議題上面臨的挑戰。挑戰賽的規則將再另行公布。
回顧 Meta 過去發展,在發展非業務相關領域時,開源帶來許多益處。Meta 的工程師開發並分享現已成為業界標準的框架,例如引領業界用於製作網頁與行動應用程式的框架 React,與領先 AI 業界的框架 PyTorch,這些已成為提供給整個科技業的通用基礎架構。Meta 相信公開共享大型語言模型,也將支援有用且安全的生成式 AI 的開發。