Be My Eyes, o aplicativo de acessibilidade para dispositivos móveis que coloca pessoas cegas e com baixa visão em uma videochamada ao vivo com um guia vidente, ajudará a Microsoft a treinar sua IA. Be My Eyes fornecerá dados de vídeo anônimos para melhorar a compreensão da cena nos modelos de IA focados na acessibilidade da Microsoft.

Os conjuntos de dados que Be My Eyes fornece à Microsoft incluirão “objetos, iluminação e enquadramentos exclusivos que representam de forma realista a experiência vivida pela comunidade de cegos e deficientes visuais”. O objetivo é tornar a IA da Microsoft mais inclusiva para pessoas com deficiência visual.

As empresas dizem que todas as informações pessoais foram apagadas dos metadados. Os dados fornecidos não serão usados ​​para publicidade ou qualquer outra finalidade que não seja o treinamento dos modelos de IA da Microsoft.

Embora esta seja a primeira parceria de dados do Be My Eyes, ela já trabalhou com a Microsoft antes, incorporando sua ferramenta Be My AI no Disability Answer Desk da Microsoft. Como o próprio nome sugere, Be My AI é a versão da empresa em um produto de assistência com tecnologia GPT-4. Nesse caso, ajuda pessoas com deficiência visual a navegar no Office, Windows e Xbox.

Be My Eyes também fechou acordo com Hilton no início deste mês. Nesse caso, funcionários dedicados do hotel ajudam os hóspedes cegos e com baixa visão a fazer coisas como ajustar os termostatos, fazer café e levantar ou baixar as persianas. Uma parceria anterior de 2023 entre as duas empresas ajudou a treinar o modelo Be My AI.