Image : Brilliant Labs
L'article ne peut pas être activé avec JavaScript. Vous pouvez également activer JavaScript dans votre navigateur et sur la nouvelle page.
Avec une fonctionnalité innovante de synthèse vocale, une faible latence et son propre moteur graphique et vectoriel, Brilliant Labs vise à offrir aux développeurs plus d'options pour leurs applications Frame.
La startup Brilliant Labs a annoncé un certain nombre de nouvelles fonctionnalités et d'outils puissants pour son casque Frame AI. Les mises à jour clés incluent des capacités avancées de synthèse vocale, une latence réduite pour les réponses en continu et l'introduction d'un moteur graphique et vectoriel interne.
Les développeurs peuvent désormais offrir une interaction plus intuitive entre l'assistant IA de Frame, Noa, et les utilisateurs, créant ainsi des applications IA plus créatives et innovantes.
Les améliorations comprennent :
- Synthèse vocale pour Noa : Les utilisateurs peuvent entendre les réponses directement depuis leur casque Frame. Cette fonctionnalité offre un moyen intuitif et mains libres de communiquer avec l'assistant Noa AI.
- Moteur graphique et vectoriel : Cet outil permet aux développeurs de créer et de diffuser du contenu graphique et vectoriel sophistiqué qui s'affiche directement devant les yeux de l'utilisateur. Cela ouvre de nouvelles possibilités pour le contenu interactif.
- Services connectés : Les utilisateurs peuvent utiliser leurs propres abonnements Perplexity et OpenAI pour fonctionner sur Frame sans restrictions, libérant ainsi tout le potentiel de leur modèle de langage préféré.
Le casque d'écoute multimodal AI Frame prend son envol
Brilliant Labs a récemment dévoilé les premières lunettes intelligentes au monde dotées d'un assistant IA multimodal intégré. La monture de 39 grammes est dotée d'un assistant IA toujours actif appelé Noa.
Le système d'IA générative multimodale peut exécuter simultanément les modèles GPT4, Stability AI et Whisper AI. En analysant les interactions entre l'utilisateur et l'assistant IA, Noa est conçu pour évoluer et développer une personnalité unique.
Avec Frame, Brilliant Labs vise à amener l’utilisation de l’IA générative de l’ordinateur portable au monde réel. Au lieu de saisir des questions, le système utilise les entrées de l'environnement. Noa traite ce que sa caméra capte, reconnaît la parole et les sons, traduit en temps réel ou résume des pages entières d'un livre.
Il peut également comparer les prix dans les magasins en scannant des vêtements ou d'autres articles. Frame n'est pas capable de fonctionnalités sophistiquées de réalité mixte comme Apple Vision Pro ou Meta Quest 3. Les MicroOLED intégrés au cadre affichent des images et du texte dans un champ de vision de 20 degrés.