Brilliant Labs近日推出了“Frame”,这是一款全球首款集成多模态人工智能助手的AI眼镜。此项创新得到了增强现实先驱及Niantic首席执行官John Hanke的支持,他以创造《宝可梦GO》而闻名。目前,Brilliant Labs已筹集600万美元,以推动这一开创性技术的发展。
该公司的顾问和投资者阵容中,现已加入了Oculus联合创始人Brendan Iribe、Siri联合创始人Adam Cheyer以及原iPhone团队的成员。在前苹果高管、现任首席执行官Bobak Tavangar的带领下,“Frame”旨在通过一个名为“Noa”的始终在线AI助手,彻底改变人们的日常生活,类似于钢铁侠的贾维斯。
Tavangar表示,“Frame为人类与数字世界及彼此之间的互动提供了新范式。Noa使用户能够更有意义地与周围环境互动,提升日常生活、工作场所、课堂等场景的体验。这体现了生成式AI的眼前承诺。”
“Noa”作为一款集成多模态AI系统的助手,能够同时运行GPT-4、Stability AI和Whisper AI,具备出色的现实视觉处理、创新图像生成及实时语音识别和翻译能力。这种多AI系统的协作为日常任务开辟了无限应用前景。
“Frame”不仅因其技术而独树一帜,也是时尚的象征,灵感来源于约翰·列侬、史蒂夫·乔布斯和甘地等标志性人物。它将先进技术与传统眼镜的轻巧设计完美融合。
尽管没有特定的增强现实功能,“Frame”被设计为嵌入AI的眼镜,允许用户通过视觉和听觉输入与大型语言模型(LLM)互动,省去打字或上传的繁琐,使用户能够实时基于所看到和听到的信息与AI进行互动。
具有个性的多模态AI助手
在其流线型设计下,“Frame”内置的Noa是一个独特的AI助手,通过隐私保护的知识图谱分析用户互动,逐步形成其个性。用户激活时,Noa会作为数字“蛋”问候用户,随着用户的反馈进化,最终展现出符合个人特性的个性。
Noa的功能包括文本摘要、语言翻译和协作任务辅助。眼镜内置的多模态AI甚至能够分析情感态度和面部表情。
“Frame”重新定义了传统搜索引擎的概念,Noa能够扫描零售商品以检查价格,或在寻找房产时识别物业,极大增强了用户的参与感和体验。
专为日常使用而设计
“Frame”轻巧仅重39克,结合了舒适性和耐用性,提供如烟熏黑和哑光冷灰等多种复古色彩。它拥有3000尼特亮度的高分辨率显示屏、一台空间摄像头以及集成麦克风,功能强大。
与AddOptics合作,“Frame”将通过独特的光学镜片铸造工艺提供处方镜片。预售将于2024年3月开始,零售价格为300美元。
致力于开源
在前产品“Monocle”成功的基础上,Brilliant Labs将强调“Frame”对消费者和开发者的可用性。该公司致力于开源原则,允许开发者探索和修改硬件和软件,并提供文档和开源代码库等资源。
Siri的联合创始人兼Brilliant Labs投资者Adam Cheyer表示,“Brilliant Labs从‘Monocle’到‘Frame’的创新令人振奋。‘Frame’是变革社会交互与嵌入式AI之间关系的重要一步。它提升了我们组织和获取信息的能力,带来一波耳机免提的应用,这让我想起了iPhone的早期。”
Brilliant Labs成立于2019年,由前苹果员工Tavangar和共同创始人Raj Nakarja、Ben Heald组成的小型团队运营。关于多媒体功能,“Frame”可以拍摄照片和录制视频,主要是为了支持其AI功能。设计侧重于让用户实时重混视觉内容,使用后数据即被删除——“Frame”不会保留图像或视频,凸显其在提升AI驱动体验中的核心作用,而不是促进社交媒体的分享。