Notebookcheck Logo

Meta AI fait ses débuts sur les casques Quest 3

Antony Hamilton Jr essaie l'IA de Meta sur Quest (Source de l'image : Meta)
Antony Hamilton Jr essaie l'IA de Meta sur Quest (Source de l'image : Meta)
Suite à l'IA multimodale sur les lunettes intelligentes Ray Ban Meta, les propriétaires de Quest 3 aux États-Unis et au Canada seront bientôt en mesure d'utiliser l'IA Meta dans le casque. Meta va supprimer les commandes vocales existantes sur Horizon OS puisque Meta AI with Vision sera capable de gérer les commandes vocales ainsi que les données visuelles provenant de Passthrough.

Les casques Quest recevront une mise à jour expérimentale avec Meta AI en août. La fonctionnalité sera limitée aux commandes vocales sur le Quest 2, mais Meta AI sur le casque Quest 3 aura des capacités multimodales complètes comme les lunettes intelligentes Ray Ban Meta. De plus, Meta AI sur ces casques de réalité mixte sera capable de récupérer des données en temps réel sur la météo, les sports ou les informations locales via Bing.

L'une des fonctionnalités annoncées par l'entreprise sur le Quest 3 est la Meta AI avec Vision. Bien que les porteurs des lunettes intelligentes Ray Ban Meta disposent de cette fonctionnalité depuis avril, c'est la première fois qu'une application aura accès aux caméras passthrough du casque Quest 3 grand public. Meta n'a pas mentionné la publication d'une API pour les développeurs tiers, mais cela semble probable, d'autant plus que de plus en plus de développeurs réclament un tel accès.

Il est possible que dans les mises à jour ultérieures, les utilisateurs puissent poser des questions sur des objets dans des environnements de RV en plus des objets physiques, puisque Meta affirme que sa fonctionnalité d'IA visuelle n'est disponible que dans Passthrough "pour commencer". Cependant, les capacités de Meta AI with Vision sont actuellement limitées à l'analyse d'objets dans des environnements réels capturés par les caméras passthrough orientées vers l'avant. En dehors de la saisie visuelle, il existe d'autres possibilités d'utiliser Meta AI dans la réalité mixte par le biais de commandes vocales. Cela remplace effectivement les commandes vocales existantes sur les casques Quest puisque ces seront bientôt obsolètes.

Meta AI with Vision a d'abord été lancé sur les lunettes intelligentes Ray-Ban en tant que fonction bêta limitée aux États-Unis et au Canada. De même, les fonctions expérimentales d'IA sur les casques Quest seront également limitées aux pays de l'UE. Meta - comme Apple et d'autres géants de la technologie basés aux États-Unis - a des difficultés avec les régulateurs de la confidentialité des données dans l'UE, et a donc décidé de ne pas publier de futurs modèles d'IA multimodale dans la région, malgré le fait que Llama soit open-source. L'entreprise prévoit de lancer une version texte uniquement de son modèle Llama 3 pour répondre aux besoins de ses utilisateurs dans l'UE.

Please share our article, every link counts!
Sarfo Ashong-Listowell, 2024-07-29 (Update: 2024-08-15)