Microsoft Seeing AI désormais disponible sur Android

Que souhaitez-vous savoir

• Microsoft vient de publier son application Seeing AI sur Android, étendant ainsi la portée de l'application à 3 milliards de personnes supplémentaires.
• Seeing AI utilise l’intelligence artificielle pour aider la communauté des aveugles et des malvoyants.
• L'application peut effectuer des tâches telles que l'identification de devises, la lecture d'une écriture manuscrite, la description d'une scène et le guidage d'une personne à travers un document.

---

Microsoft a travaillé pour la première fois sur son application Seeing AI en tant que projet de recherche en 2017. Depuis, elle a évolué vers une application complète accessible au public. Jusqu'à présent, Seeing AI n'était disponible que pour iOS, mais il est désormais également disponible sur Android. Avec plus de 3 milliards d'utilisateurs d'Android sur la planète, le déploiement étend considérablement la portée de l'application.

Seeing AI utilise l’intelligence artificielle pour aider la communauté des aveugles et des malvoyants. Il peut effectuer des tâches quotidiennes telles que guider quelqu'un dans un document ou un menu, reconnaître des billets de banque et identifier des images. Pour utiliser l'application, vous pouvez soit pointer son appareil photo, soit prendre une photo.

Seeing AI prend actuellement en charge 18 langues, mais ce nombre passera à 36 en 2024.

Les fonctionnalités suivantes ont été intégrées à la version iOS de Seeing AI et sont également disponibles sur version Android récemment publiée:

• Descriptions plus riches des photos: En plus de fournir un bref résumé des photos sur la chaîne Scène, vous pouvez désormais appuyer sur « plus » info' et une description riche sera générée, comprenant beaucoup plus de détails sur ce qu'il y a dans le image.
• Discutez avec vos documents : Après avoir numérisé un document, en plus de l'entendre lire à haute voix, vous pouvez également discuter avec Seeing AI pour demander des questions, par exemple sur les éléments d'un menu, le prix d'un article sur un reçu ou pour résumer un article.

Microsoft a également souligné certaines des fonctionnalités clés de Seeing AI pour ceux qui ne connaissent pas l'application :

• CourtTexte: prononce le texte dès qu'il apparaît devant la caméra.
• Documents: Fournit un guidage audio pour capturer une page imprimée et lit le contenu à haute voix, ainsi que son formatage d'origine. Discutez avec Seeing AI pour trouver rapidement des informations.
• Des produits: Scanne les codes-barres, en utilisant des bips audio pour vous guider; entendre le nom et les informations sur l'emballage lorsqu'elles sont disponibles.
• Scènes: Écoutez une description de la scène capturée et appuyez sur « plus d'informations » pour générer une description riche. Explorez la photo en déplaçant votre doigt sur l'écran pour entendre l'emplacement des différents objets.
• Personnes: Identifiez les amis autour de vous.
• Devise: Reconnaît les billets de banque.
• Couleurs: Identifie la couleur perçue.
• Écriture: Lit le texte manuscrit comme dans les cartes de vœux (disponible dans un sous-ensemble de langues).
• Lumière: Génère une tonalité audible correspondant à la luminosité de l'environnement.
• Images dans d'autres applications: Partagez une photo avec Seeing AI pour la reconnaître.

La vidéo ci-dessous date d'il y a quatre ans, mais elle montre le concept général de Seeing AI.