拜登政府啟動美國人工智慧安全研究所聯盟
在新設立的美國人工智慧安全研究所(USAISI)董事長任命一位高級白宮助手後,拜登政府宣布成立美國人工智慧安全研究所聯盟(AISIC),這是「首個專注於人工智慧安全的聯盟」。
此次合作包含超過200個成員組織,涵蓋主要科技公司如Google、Microsoft和Amazon,以及領先的大型語言模型(LLM)公司,如OpenAI、Cohere和Anthropic。聯盟還包括研究實驗室、學術團隊、公民社會組織、州和地方政府及非營利組織。
根據NIST的部落格文章,AISIC是迄今為止最大的測試與評估團隊集合,旨在建立人工智慧安全的基礎測量科學。在USAISI的運作下,聯盟將支持拜登總統行政命令中列出的關鍵倡議,包括制定紅隊測試指南、能力評估、風險管理、安全和保安協議,以及合成內容的水印技術。
聯盟成立詳情
聯盟的宣布於2023年10月31日伴隨著拜登總統的人工智慧行政命令。NIST網站指出,參與資格對能夠貢獻專業知識、產品、數據或模型的組織開放。選定的參與者需支付每年1,000美元的費用,並與NIST簽署聯盟合作研究與開發協議(CRADA)。
人工智慧安全指導方針
聯盟成員將專注於幾個關鍵指導方針:
1. 創建安全、可靠且可部署的人工智慧開發與應用工具和最佳實踐。
2. 建立識別和評估潛在有害AI能力的指導方針。
3. 推廣生成式AI的安全開發實踐,並解決雙重用途基礎模型的問題,確保隱私保護的機器學習。
4. 提供資源以建立和維護測試環境。
5. 發展有效的紅隊測試與隱私保護機器學習技術。
6. 設計用於驗證數字內容的工具。
7. 確定必要的AI人才技能標準,包括風險識別、管理、測試和驗證。
8. 探討社會與技術之間的關係,聚焦人們在多樣的環境中如何與AI互動。
9. 提供關於管理AI實體生命周期中相互依賴性的指導。
資金不確定性
儘管已宣布成立,但關於USAISI的資金問題仍存在疑問。報導指出,自白宮11月份首次宣布以來,對於運營框架或資金來源的具體細節鮮有披露,特別是考慮到NIST每年超過16億美元的預算及其已知的資源限制。
1月時,一組兩黨參議員向參議院撥款委員會申請1,000萬美元以協助成立USAISI,但該資金的狀態仍不明朗。此外,眾議院科學委員會的立法者對NIST的透明度和新研究所資金授予缺乏競爭程序表示擔憂。
談及資金挑戰,前Accenture及Twitter的AI倫理專家Rumman Chowdhury指出,USAISI在執行命令下運作,並不具備資金來源。她理解阻礙立法行動的政治複雜性,但同時強調該倡議在資金上嚴重不足。