Brilliant Labs的框架眼鏡:提升日常生活的多模態AI助手

Brilliant Labs 最近發布了 Frame,全球首款整合多模態 AI 助手的智慧眼鏡。這項創新得到了增強現實先驅及 Niantic CEO 約翰·漢克(John Hanke)的支持,他因創造了《寶可夢 GO》而聞名。至今,Brilliant Labs 已籌集了 600 萬美元,旨在推進這一突破性技術。

該公司的顧問和投資者陣容不斷增強,包括 Oculus 聯合創始人布蘭登·艾瑞比(Brendan Iribe)、Siri 聯合創始人亞當·切耶(Adam Cheyer)等知名人士,以及原 iPhone 團隊成員。由前蘋果高管、CEO 博巴克·塔萬卡(Bobak Tavangar)領導的 Frame,旨在用一個名為 Noa 的隨時可用 AI 助手徹底改變日常生活,類似於鋼鐵人的 Jarvis。

塔萬卡表示:「Frame 創造了人類與數字世界及彼此互動的新範式。Noa 使使用者能夠更有意義地與周圍環境互動,在日常生活、工作場所、教室等各個方面增強經驗,體現了生成式 AI 的普及潛力。」

Frame 包含一個能同時運行 GPT-4、Stability AI 和 Whisper AI 的多模態 AI 系統,Noa 在現實世界視覺處理、新穎圖像生成以及即時語音識別和翻譯方面表現出色。多個 AI 系統的協作為日常任務開創了無限應用。

此外,Frame 不僅因技術而脫穎而出,其時尚設計也受到約翰·藍儂、史蒂夫·喬布斯和甘地等標誌性人物的啟發,將先進技術無縫融入輕巧的傳統眼鏡風格。

雖然不具體強調增強現實功能,Frame 被設計為嵌入式 AI 眼鏡,使用者可以通過視覺和聽覺輸入與大型語言模型(LLM)互動,省去打字或上傳的麻煩,實現基於實時視聽內容的即時互動。

隨著流線型設計下的 Noa AI 助手,該助手通過隱私導向的知識圖譜來分析互動,進而形成獨特的個性。啟動後,使用者會見到以數位“蛋”形式呈現的 Noa,隨著使用者的反應不斷演變,最終形成反映個人特質的人格。

Noa 的功能包括文本摘要、語言翻譯和協作任務協助。眼鏡內建的多模態 AI 甚至能分析情感情緒和面部表情。

Frame 重新定義了傳統搜尋引擎的概念,Noa 可以掃描零售商品進行價格檢查,或在看房過程中識別物件,大幅提升使用者的參與度和體驗。

自設計以來,Frame 僅重 39 克,結合了舒適性和耐用性,並採用復古風格的設計,提供煙霧黑和哑光酷灰等顏色選擇。它配備高解析度顯示器,亮度高達 3000 尼特,並配有空間相機和內建麥克風以增強功能。

與 AddOptics 合作,Frame 將通過獨特的光學鏡片鑄造工藝提供處方鏡片。預訂將於 2024 年 3 月開始,零售售價為 300 美元。

在開放源碼方面,Brilliant Labs 將強調 Frame 對消費者和開發者的可用性,並致力於開放源碼原則,允許開發者探索和修改硬體和軟體,提供文檔和開源代碼庫等資源。

Siri 聯合創始人及 Brilliant Labs 投資者亞當·切耶表示:「Brilliant Labs 從 Monocle 到 Frame 的創新令人鼓舞。Frame 是嵌入式 AI 轉變社會互動的關鍵一步,提升了我們組織和獲取資訊的能力,開啟了一波類似於 iPhone 初期的免手持應用。」

Brilliant Labs 於 2019 年由前蘋果員工塔萬卡與兩位聯合創始人拉吉·納卡爾賈(Raj Nakarja)和本·希爾德(Ben Heald)創立,目前團隊規模僅有三人。

在多媒體功能方面,Frame 能夠捕捉照片和錄製視頻,主要用於支持 AI 功能。其設計焦點在於讓使用者能夠即時重新混合視覺資料,並在使用後刪除數據—Frame 不保留圖片或視頻,這使其與 Snapchat 或 Meta 等平台不同,更強調增強 AI 驅動的體驗,而非社交媒體分享。

Most people like

Find AI tools in YBX