Be My Eyes, l'application d'accessibilité pour appareils mobiles qui met en relation des personnes aveugles ou malvoyantes avec un guide voyant dans le cadre d'un appel vidéo en direct, aidera Microsoft à former son IA. Be My Eyes fournira des données vidéo anonymes afin d'améliorer la compréhension des scènes des modèles d'IA de Microsoft axés sur l'accessibilité.
Les jeux de données que Be My Eyes mettra à la disposition de Microsoft contiendront "des objets, des éclairages et des cadrages uniques qui représentent de manière réaliste l'expérience de vie de la communauté des aveugles et des malvoyants". L'objectif est de rendre l'intelligence artificielle de Microsoft plus accessible aux personnes souffrant d'un handicap visuel.
Les entreprises indiquent que toutes les informations personnelles ont été supprimées des métadonnées. Les données fournies ne seront pas utilisées à des fins publicitaires ni à d'autres fins que la formation aux modèles d'IA de Microsoft.
Bien qu'il s'agisse du premier partenariat de données de ce type pour Be My Eyes, l'entreprise a déjà collaboré avec Microsoft en intégrant son outil Be My AI dans le Disability Answer Desk de Microsoft. Comme son nom l'indique, Be My AI est la version basée sur GPT-4 d'un produit d'aide de l'entreprise. Dans ce cas, il aide les personnes souffrant d'un handicap visuel à naviguer dans Office, Windows et Xbox.
Au début du mois, Be My Eyes a également conclu un accord avec Hilton. Ici, des employés d'hôtel dévoués aident les clients aveugles et malvoyants, par exemple en réglant les thermostats, en préparant le café ou en montant et en descendant les stores. Une formation au modèle Be My AI a été dispensée dans le cadre d'un précédent partenariat entre les deux entreprises en 2023.
