Vous pouvez utiliser Astra sur votre téléphone Android ou vos lunettes intelligentes. Il suffit de pointer votre caméra sur quelque chose, et Astra comprendra et répondra à vos questions comme un ami serviable. Il se souvient aussi des conversations précédentes, donc vous pouvez changer d’appareil sans perdre le fil.
Quelles sont les fonctionnalités clés du projet Astra ?
Voici les principales fonctionnalités qui rendent le projet Astra utile et intelligent :
- Interaction multimodale : Astra peut comprendre votre voix, les images de votre caméra et l’écran en même temps. Il peut reconnaître rapidement les objets et les sons, puis répondre par du texte.
- Assistance proactive et contextuelle : Astra remarque ce qui se passe autour de vous et peut vous rappeler des choses ou aider avant même que vous ne demandiez. Il peut aider pour des tâches comme des rappels de jeûne ou des devoirs. The Verge dit qu’Astra est “plus intelligent et plus proactif”.
- Mémoire améliorée et personnalisation : Astra se souvient de ce que vous venez de dire et des conversations passées pour vous donner des réponses plus adaptées.
- Reconnaissance d’objets et guidage en temps réel : Astra utilise votre caméra pour identifier des objets et vous aider avec des tâches, comme afficher des instructions de réparation. Ce guidage en direct montre à quel point l’IA générative a progressé. Selon Analytics Insight, le projet Astra est “le prochain grand bond en avant dans l’IA générative”.
- Intégration avec les services Google : Astra fonctionne avec des applications Google comme Maps, Calendar, Gmail et Lens pour passer des appels, créer des rappels et trouver des informations.
- Capacités linguistiques avancées : Astra comprend 24 langues et de nombreux accents. Il peut aussi percevoir les émotions dans votre voix pour parler naturellement.
- Intégration fluide entre appareils : Astra fonctionne sur les téléphones Android et les lunettes intelligentes spéciales, pour vous aider peu importe l’appareil que vous utilisez.
- Accès développeur via API en direct : Google permet aux développeurs d’utiliser les outils vocaux et visuels rapides d’Astra pour créer de nouvelles applications intelligentes.
Que fait-il ?
Le projet Astra prend votre voix et votre vidéo et les aligne comme une chronologie. Il ne fait pas que vous écouter ; il regarde aussi, ce qui l’aide à comprendre à la fois ce que vous…
dire et montrer, comme une conversation avec quelqu’un qui se souvient de tout.
Cette mémoire, appelée mise en cache, permet à Astra de se rappeler des questions, commandes et images passées. Au lieu de répondre à une seule question à la fois, elle relie les idées et répond naturellement, rendant les conversations fluides.
Pour bien fonctionner, Astra doit être rapide et utiliser un traitement à faible latence pour garder des réponses instantanées. Bien que les démonstrations aient montré un léger délai, Astra a tout de même répondu intelligemment et avec contexte, montrant qu’elle se rapproche d’une interaction en temps réel.
Des entreprises comme Tesla et Waymo utilisent l’IA multimodale en combinant les données des caméras, radars, LiDAR et capteurs audio. Cette méthode améliore la prise de décision en temps réel dans les véhicules autonomes et montre à quel point l’IA multimodale peut être puissante.
Voici comment Google décrit le Project Astra dans son tweet officiel, montrant l’interaction fluide et en temps réel du prototype dans la vie quotidienne :
Project Astra est un prototype de @GoogleDeepMind qui explore comment un agent IA universel peut vraiment être utile dans la vie quotidienne. Regardez notre prototype en action en deux parties, chacune filmée en une seule prise, en temps réel ↓ #GoogleIO pic.twitter.com/uMEjIJpsjO
— Google (@Google) 14 mai 2024
Quels appareils peuvent faire fonctionner Project Astra ?
Actuellement, Astra peut fonctionner sur :
- Téléphones Android
- Lunettes intelligentes prototypes (encore en test)
Google prévoit de l’étendre à plus d’appareils avec le temps. Le plus important, c’est la compatibilité multi-appareils, ce qui signifie que tu peux commencer sur ton téléphone et continuer sur tes lunettes, ou l’inverse.
Quels sont des exemples concrets d’utilisation d’Astra ?
Voici ce que tu peux faire avec Astra :
- Besoin d’aide pour faire des achats ? Pointez simplement votre caméra vers un produit et Astra vous dira son nom, ce que les gens en pensent et où l’acheter.
- Un problème avec ta technologie ? Montre à Astra un câble cassé ou un appareil, et elle pourra deviner le problème et te proposer une solution.
- Tu veux comprendre une autre langue ? Si tu vois des mots étrangers, Astra peut les lire et les traduire instantanément.
- Envie d’apprendre ? Pointez Astra sur n’importe quoi comme des plantes, des outils ou des livres, et elle te donnera des infos rapides ou même des tutoriels.
- Besoin de directions ? Regarde un panneau de rue et Astra t’aidera à trouver ton chemin ou te parlera des lieux à proximité.
Il a expliqué qu’Astra est un agent IA intelligent capable de voir, comprendre et répondre comme un humain. Mehdi l’a qualifié de grande avancée vers une IA plus utile et naturelle à utiliser.
En quoi Project Astra, GPT-4o et Gemini 1.5 Pro sont-ils différents ?
Chez AllAbout AI, nous adorons décomposer les dernières technologies d’IA pour les rendre faciles à comprendre. Voici un aperçu simple et côte à côte de Project Astra, GPT-4o d’OpenAI et Gemini 1.5 Pro de Google, avec leurs fonctionnalités, points forts, disponibilité et évaluations par étoiles pour vous aider à les comparer :
| Fonctionnalité | Description de Project Astra | Description de GPT-4o (OpenAI) | Description de Gemini 1.5 Pro (Google) | Astra ⭐️ | GPT-4o ⭐️ | Gemini ⭐️ |
| Objectif principal | Assistant IA en temps réel avec vision et applications Google | IA multimodale polyvalente, rapide et économique | Grande fenêtre de contexte, raisonnement complexe, Google Cloud | ⭐️⭐️⭐️⭐️☆ | ⭐️⭐️⭐️⭐️⭐️ | ⭐️⭐️⭐️⭐️☆ |
| Types d’entrée | Texte, voix, images, vidéo, perception en temps réel | Texte, images, audio, vidéo | Texte, images, vidéo, audio, code | ⭐️⭐️⭐️⭐️☆ | ⭐️⭐️⭐️⭐️☆ | ⭐️⭐️⭐️⭐️⭐️ |
| Forces | Aide en temps réel, mémoire, faible latence | Langage puissant, visuels, multilingue | Grande capacité de contexte, codage, raisonnement | ⭐️⭐️⭐️⭐️☆ | ⭐️⭐️⭐️⭐️⭐️ | ⭐️⭐️⭐️⭐️☆ |
| Performance | Niveau démo, optimisé pour la vitesse | Meilleurs résultats aux benchmarks, largement accessible | Compétitif, excelle dans les tâches à grande échelle | ⭐️⭐️⭐️☆☆ | ⭐️⭐️⭐️⭐️⭐️ | ⭐️⭐️⭐️⭐️☆ |
| Écosystème | Intégration profonde avec les applications Google | Indépendant de la plateforme, via ChatGPT | Intégration avec Google Cloud et AI Studio | ⭐️⭐️⭐️⭐️⭐️ | ⭐️⭐️⭐️⭐️☆ | ⭐️⭐️⭐️⭐️☆ |
| Disponibilité | Démo prévue pour 2024 | Disponible maintenant sur ChatGPT | Aperçu privé, liste d’attente | ⭐️⭐️☆☆☆ | ⭐️⭐️⭐️⭐️⭐️ | ⭐️☆☆☆☆ |
| Faible latence | Project Astra vise une latence inférieure à 200 ms | GPT-4o répond en environ 200–300 ms | Gemini 1.5 Pro cible 200–300 ms | ⭐️⭐️⭐️⭐️⭐️ | ⭐️⭐️⭐️⭐️☆ | ⭐️⭐️⭐️⭐️☆ |
Quels sont les principaux défis et limites des lunettes intelligentes de Project Astra ?
Les lunettes intelligentes de Project Astra sont impressionnantes, mais elles doivent encore surmonter certains défis importants.
- Limites de précision visuelle : Les lunettes affichent une vue petite et étroite avec un espace d’écran limité. Elles dépendent d’une connexion téléphonique solide, et le matériel et les logiciels en phase de développement peuvent poser des problèmes.
- Problèmes d’autonomie : L’utilisation intensive de la vidéo et de l’audio épuise rapidement la batterie. Il est encore difficile de les rendre légères tout en étant durables.
- Autres préoccupations : Une utilisation prolongée provoque une fatigue oculaire. Les enregistrements constants soulèvent des inquiétudes en matière de vie privée, et certaines personnes se sentent mal à l’aise de les porter en public. Des bugs logiciels et des pertes de connexion nuisent à la fiabilité.
Quels sont les projets futurs de Project Astra ?
Le marché de l’IA multimodale valait 1,6 milliard USD en 2024 et devrait croître de 32,7 % par an jusqu’en 2034. Google souhaite saisir cette opportunité en développant Project Astra comme assistant IA universel sur plusieurs appareils. Voici ce qui arrive :
- Aide multimodale améliorée : Astra parlera plus naturellement avec des voix réalistes. Il se souviendra de plus de choses et pourra agir de manière autonome, en vous aidant avant même que vous ne demandiez, en observant ce qui se passe autour de vous.
- Plus d’appareils et d’applications : Astra ne sera pas limité aux téléphones. Il fonctionnera dans Google Search (comme le nouveau Search Live), dans l’application Gemini AI, et dans d’autres applications créées par des développeurs tiers. Il tournera aussi sur des lunettes intelligentes créées avec des partenaires comme Samsung et Warby Parker.
- Applications concrètes : Google teste Astra comme tuteur utile pouvant aider aux devoirs en détectant les erreurs et en dessinant des schémas. Il est aussi conçu pour aider les personnes malvoyantes grâce à des partenariats comme celui avec Aira.
- Support aux développeurs : Google fournira aux créateurs d’applications des outils (API Live) pour créer rapidement des apps basées sur la voix et la vision, avec des capacités avancées comme la compréhension des émotions et le raisonnement.
- Grande vision : Google veut rendre Astra encore plus intelligent grâce à un « modèle du monde » qui pense comme un cerveau humain, capable de planifier et d’imaginer différentes situations.
- Confidentialité et simplicité : Google travaille dur pour que Astra respecte votre vie privée et soit agréable à utiliser.
- Quand sera-t-il disponible ? Astra est encore en phase de test avec un petit groupe. Mais bientôt, plus de gens pourront le découvrir via Google Search et Gemini Live. Un lancement plus large est prévu en 2025 et au-delà.
Découvrez ces glossaires sur l’IA !
Que vous soyez débutant ou expert, il y a toujours quelque chose d’excitant à découvrir !
FAQ
Quelle entreprise a développé Project Astra ?
Astra peut-elle passer des appels téléphoniques ?
Astra est-elle comme ChatGPT ou Siri ?
Puis-je essayer Astra maintenant ?
Fonctionnera-t-elle sur iPhone ?
Astra peut-elle remplacer Siri ou Alexa ?
Astra est-elle meilleure que ChatGPT ?
Conclusion
Project Astra illustre la vision de Google pour les assistants IA du futur en misant sur la compréhension naturelle, la conscience du contexte et une intégration fluide dans la vie quotidienne. En passant de la recherche aux produits concrets comme Gemini Live, Astra pourrait changer notre façon d’utiliser la technologie pour le mieux.
Avec des tests en cours et des améliorations prévues pour 2025 et au-delà, l’avenir d’Astra s’annonce prometteur. Que pensez-vous d’Astra ?
Partagez votre avis dans les commentaires ci-dessous et explorez le glossaire IA pour mieux comprendre les technologies qui transforment notre monde aujourd’hui.
