來自Galactica的洞察：Meta在ChatGPT推出前僅兩週內遇到的失敗模型所獲得的啟示

Home AI新聞來自Galactica的洞察：Meta在ChatGPT推出前僅兩週內遇到的失敗模型所獲得的啟示

Updated on 十一月 1 2024

一年前，就在 OpenAI 推出 ChatGPT 前的兩週，Meta 發布了 Galactica——一個針對科學的開源“大型語言模型”，經過 4800 萬篇科學論文的訓練。Meta 宣稱 Galactica 能夠總結學術文獻、解決數學問題、生成維基文章、撰寫科學代碼，並標註分子和蛋白質。

然而，在 2022 年 11 月 17 日，Galactica 在公開反彈後僅運行三天便遭下架，反對聲音主要源於其產生的不準確且有時具冒犯性的輸出——這一現象被稱為「幻覺」。批評者指出 Galactica 經常產生看似可信但事實上不正確的回應，這讓許多科學界人士感到震驚。

儘管引發爭議，Meta 的首席科學家 Yann LeCun 在社交媒體上為 Galactica 辯護，表示：「不再可能隨便地將其用於娛樂。高興嗎？」然而，該模型未能達到對變革性生成 AI 的預期。

兩週後，ChatGPT 上線。同週，關於 GPT-4 的傳聞浮現，讓參加新奧爾良 NeurIPS 會議的 AI 研究人員充滿期待。11 月 30 日，OpenAI 發布了 ChatGPT，標誌著 AI 領域的一個關鍵時刻，而非 GPT-4。

ChatGPT 迅速顯露出自身的幻覺問題，產生自信卻誤導的回應。OpenAI 在發佈博客中承認這一限制，指出解決此問題是「具有挑戰性的」。儘管存在這些缺陷，ChatGPT 在短短兩個月內用戶數量激增，達到約 1 億月活躍用戶，目前每週用戶已達 1 億。

Galactica 的遺產仍在延續，Meta 也認識到寶貴的教訓。Meta AI 研究副總裁 Joelle Pineau 表示：「我們學到了很多寶貴的經驗……我仍然收到很多希望使用該模型的請求。」她澄清 Galactica 始終是作為研究項目，而非產品。「預期與現實之間的差距過大，」Pineau 注意到該模型的幻覺率低於其他模型，這主要得益於其專注於科學文獻。

在反對聲中，Meta 撤回了 Galactica 的演示，以防止濫用，承認缺乏負責任的使用指南——這一做法已被納入未來的發布中。Pineau 指出如果再來一次，他們會更好地管理受眾期望。「Galactica 的教訓已融入我們下一代模型中。」

下一代模型包括 Llama，這是 Meta 的大型語言模型，在 2023 年 2 月引起了相當大的關注，隨後在 7 月發布了商業版 Llama 2，8 月推出了 Code Llama。Llama 成為首個主要的免費開源大型語言模型，並在 AI 社區引發了持續至今的廣泛辯論。

Llama 在 2 月 24 日推出時，Meta 表現出謹慎。LeCun 強調：「Meta 致力於開放研究，並根據 GPL v3 許可證向研究社區釋出所有模型。」然而，研究人員必須填寫表格才能獲取 Llama 的訪問權，這是基於 Galactica 反彈後的防範措施。LeCun 解釋：「在 Galactica 之後，人們指責我們威脅到了社會的結構。」

機器人變革：Tangram Vision的人工智慧驅動3D感測器如何顛覆計算機視覺

Dell 與 Hugging Face 聯手簡化大型語言模型的部署流程

Most people like

Metaphysic.ai

46.3K

Metaphysic.ai 站在超寫實 AI 生成視頻內容的最前沿，提供驚豔的視覺效果，重新定義數位故事講述。

生成式人工智慧 AI Content Generator

Livewello

8.5K

釋放強大基因組分析在個人健康解決方案中的潛力。探索遺傳洞見如何定制醫療策略，以增進個人福祉並優化醫療結果。

基因組數據分析 Healthcare

ShortsFaceless

22.4K

輕鬆創建引人入勝的 AI 短片輕鬆釋放 AI 生成短片的潛力！只需幾次點擊，便可將您的創意靈感轉化為引人注目的內容。我們的使用者友好平台使您能夠運用人工智慧的力量，製作高品質的短片，吸引觀眾的注意。享受旨在提升故事講述的精簡流程，同時節省時間和精力。立即開始創作您獨特的 AI 短片吧！

AI 視頻生成 Other

Tweet AI

8.7K

提升 X 平台的銷售及互動在當今競爭激烈的市場中，提高 X 平台的銷售及增強觀眾互動變得比以往任何時候都重要。這個平台提供了獨特的機會，讓您能夠與目標受眾建立連結，推動轉換，並建立持久的關係。透過實施有效的策略來最大化您在 X 上的存在感，您可以提升品牌的能見度並取得卓越成果。準備好改變您的做法了嗎？讓我們一起探索如何優化您在 X 上的銷售與互動！

人工智慧 AI Reply Assistant

Find AI tools in YBX