Brilliant Labs a dévoilé Frame, les premières lunettes AI au monde dotées d'un assistant AI multimodal intégré. Cette innovation bénéficie du soutien de John Hanke, PDG de Niantic et pionnier de la réalité augmentée, connu pour la création de Pokémon Go. À ce jour, Brilliant Labs a levé 6 millions de dollars pour faire avancer cette technologie révolutionnaire.
Le prestigieux groupe de conseillers et d'investisseurs comprend désormais des noms notables tels que Brendan Iribe (cofondateur d'Oculus), Adam Cheyer (cofondateur de Siri) et des membres de l'équipe originale de l'iPhone. Sous la direction de Bobak Tavangar, ancien dirigeant d’Apple, Frame vise à transformer la vie quotidienne grâce à un assistant AI toujours actif, Noa, comparable à Jarvis, l’IA d’Iron Man.
« Frame offre un nouveau paradigme sur la manière dont les humains interagissent avec le monde numérique et entre eux », déclare Tavangar. « Noa permet aux utilisateurs d'interagir de manière plus significative avec leur environnement, améliorant ainsi les expériences au quotidien, dans les lieux de travail, les salles de classe et au-delà. Cela incarne la promesse de l'AI générative à hauteur d'yeux. »
Conçu avec un système AI multimodal capable de faire fonctionner simultanément GPT-4, Stability AI et Whisper AI, Noa excelle dans le traitement visuel réel, la génération d'images novatrices, ainsi que la reconnaissance et la traduction vocales en temps réel. Cette collaboration entre plusieurs systèmes AI ouvre la voie à d'innombrables applications pour les tâches quotidiennes.
Frame se distingue non seulement par sa technologie mais aussi en tant qu'élément de mode, inspiré par des figures emblématiques comme John Lennon, Steve Jobs et Gandhi. Il allie harmonieusement technologie avancée à un design léger et élégant ressemblant à de simples lunettes.
Bien qu'il n'y ait pas de fonctionnalités de réalité augmentée spécifiques, Frame est conçu comme des lunettes intégrant une AI, permettant aux utilisateurs d’interagir avec des modèles de langage à grande échelle (LLMs) via des entrées visuelles et auditives. Cela élimine le besoin de taper ou de télécharger, permettant une interaction immédiate avec l'AI basée sur ce que les utilisateurs voient et entendent en temps réel.
Assistant AI Multimodal Avec Personnalité
Sous son design élégant, Frame abrite Noa, un assistant AI unique qui développe sa personnalité en analysant les interactions via un graphique de connaissances axé sur la confidentialité. Lors de son activation, les utilisateurs accueillent Noa sous la forme d'un « œuf » numérique qui évolue en fonction des réponses de l'utilisateur, finissant par adopter une personnalité reflétant le caractère de l’individu.
Les fonctionnalités de Noa incluent la synthèse de textes, la traduction de langues et l'assistance à des tâches collaboratives. L’AI multimodale intégrée à ces lunettes peut même analyser les sentiments émotionnels et les expressions faciales.
Frame redéfinit le concept traditionnel des moteurs de recherche, Noa étant capable d'analyser des articles de vente pour vérifier les prix ou identifier des propriétés lors de la recherche d'une maison, améliorant considérablement l'engagement et l'expérience des utilisateurs.
Conçu pour un Usage Quotidien
Pesant seulement 39 grammes, Frame allie confort, durabilité et design vintage élégant disponible en couleurs comme Noir Fumé et Gris Mat. Il dispose d'un écran haute résolution avec une luminosité de 3 000 nits, d'une caméra spatiale et d'un microphone intégré pour des fonctionnalités avancées.
En partenariat avec AddOptics, Frame proposera des verres correcteurs grâce à un processus unique de fabrication de lentilles optiques. Les précommandes commenceront en mars 2024 à un prix de détail de 300 dollars.
Un Engagement envers l'Open Source
S'appuyant sur le succès de son précédent produit, Monocle, Brilliant Labs mettra en avant la disponibilité de Frame pour les consommateurs et les développeurs. L'entreprise est dédiée aux principes open source, permettant aux développeurs d'explorer et de modifier le matériel et le logiciel, en fournissant des ressources telles que de la documentation et une base de code open source.
Adam Cheyer, cofondateur de Siri et investisseur chez Brilliant Labs, a déclaré : « Les innovations de Brilliant Labs, de Monocle à Frame, sont inspirantes. Frame est un pas décisif vers la transformation des interactions sociales avec l'AI intégrée. Cela améliore notre capacité à organiser et accéder à l'information, annonçant une vague d'applications mains-libres rappelant les débuts de l'iPhone. »
Fondée en 2019 par Tavangar, ancien employé d'Apple, avec les cofondateurs Raj Nakarja et Ben Heald, Brilliant Labs fonctionne avec une petite équipe de trois personnes.
Concernant les capacités multimédia, Frame peut capturer des photos et enregistrer des vidéos principalement pour soutenir ses fonctions AI. Le design met l’accent sur la possibilité pour les utilisateurs de remixer visuels en temps réel, les données étant effacées après utilisation—Frame ne conserve ni images ni vidéos, se distinguant ainsi des plateformes comme Snapchat ou Meta. Cela renforce son rôle principal d'amélioration des expériences pilotées par l'AI plutôt que de promouvoir le partage sur les réseaux sociaux.