Lookout utilise la vision par ordinateur pour aider les personnes souffrant d'une déficience visuelle ou non-voyantes à accomplir des tâches plus rapidement et plus facilement. Grâce à l'appareil photo de votre téléphone, Lookout facilite la recherche d'informations sur le monde qui vous entoure.

L'application vous permet également d'accomplir des tâches quotidiennes plus efficacement (comme trier le courrier, ranger les courses et plus encore). Conçu sur les conseils de la communauté des non-voyants et des déficients visuels, Lookout soutient Google dans sa mission, qui consiste à rendre les informations accessibles à tout un chacun à l'échelle mondiale.

Lookout dispose de six modes vous permettant d'effectuer diverses actions :

• Le mode Images décrit les contenus d'une image. La nouvelle fonctionnalité Questions/réponses sur l'image offre une description détaillée des images, et permet de poser des questions par commande vocale ou textuelle (disponible en anglais au Canada, aux États-Unis et au Royaume-Uni uniquement).

• À l'aide du mode Texte, vous pouvez survoler un texte pour qu'il vous soit lu à voix haute. Ce mode est particulièrement utile pour trier le courrier et lire des panneaux, par exemple.

• En plus de scanner les codes-barres, vous pouvez identifier rapidement les produits alimentaires emballés grâce au mode Étiquettes alimentaires, disponible dans plus de 20 pays.

• Capturez l'intégralité d'une page de texte ou d'écriture manuscrite avec le mode Documents.

• Le mode Devise vous aide à identifier les billets de banque de manière rapide et fiable. Il reconnaît les billets en dollars américains, en euros et en roupies indiennes.

• Le mode Exploration (bêta) vous donne des informations sur votre environnement : il identifie les objets et les personnes qui vous entourent, et lit les panneaux. Lookout est disponible dans plus de 30 langues sur les appareils équipés d'Android 6 ou version ultérieure, avec au moins 2 Go de RAM (recommandé).

Seeing AI est une application gratuite qui raconte le monde qui vous entoure. Conçu avec et pour la communauté des aveugles et des malvoyants, ce projet de recherche en cours exploite la puissance de l'IA pour ouvrir le monde visuel en décrivant les personnes, les textes et les objets à proximité. Seeing AI fournit des outils pour vous aider dans une variété de tâches quotidiennes :

• Texte court – Dit le texte dès qu'il apparaît devant la caméra.

• Documents – Fournit des instructions audio pour capturer une page imprimée et reconnaît le texte, ainsi que sa mise en forme d'origine.

• Produits – Scanne les codes-barres, en utilisant des bips audio pour vous guider ; entendre le nom et les informations sur l'emballage lorsqu'elles sont disponibles.

• Personnes – Enregistre les visages des personnes afin que vous puissiez les reconnaître et obtenir une estimation de leur âge, de leur sexe et de leur expression.

• Devise – Reconnaît les billets de banque.

• Scènes – Écoutez une description générale de la scène capturée. Explorez la photo en déplaçant votre doigt sur l'écran pour entendre l'emplacement des différents objets.

• Monde – Une expérience de réalité augmentée audio pour explorer un environnement inconnu, y compris entendre les objets annoncés autour de vous avec Spatial Audio (nécessite un appareil avec un LiDAR et iOS 14+).

• Navigation intérieure – Disponible sur World Channel, vous permet de créer des itinéraires à travers un bâtiment, comme "l'entrée de la salle de classe", et de naviguer en suivant le son (nécessite un appareil avec un processeur A9 ou ultérieur, et iOS 14+).

• Couleurs – Identifie les couleurs.

• Écriture manuscrite – Lit le texte manuscrit comme dans les cartes de vœux (disponible dans un sous-ensemble de langues).

• Lumière – Génère une tonalité audible correspondant à la luminosité de l'environnement.

• Images dans d'autres applications – Appuyez simplement sur "Partager" et "Reconnaître avec Seeing AI" pour décrire les images de Mail, Photos, Twitter, etc.

• Parcourir les photos – Écoutez les descriptions des photos enregistrées sur votre appareil. Voir l'IA continuer d'évoluer à mesure que nous entendons parler de la communauté et que la recherche sur l'IA progresse. Découvrez des tutoriels avec cette playlist YouTube : http://aka.ms/SeeingAIPlaylist. Des questions, des commentaires ou des demandes de fonctionnalités ? Envoyez-nous un e-mail à SeeingAI@Microsoft.com.