La nueva aplicación GPT-4 puede ‘cambiar la vida’ de las personas con discapacidad visual

La primera aplicación que aprovecha la capacidad de reconocimiento de imágenes de GPT-4 ha sido descrita como “cambio de vida” por usuarios con discapacidades visuales.

se mis ojosuna startup danesa, integró el modelo de IA en una nueva función para personas ciegas o deficientes visuales. Con el nombre de “Voluntario virtual”, la herramienta de reconocimiento de objetos puede responder preguntas sobre cualquier imagen que se envíe.

Imagine, por ejemplo, que un usuario tiene hambre. Simplemente pueden fotografiar un ingrediente y solicitar recetas relacionadas. Si prefieren comer fuera, pueden tomar una imagen de un mapa y obtener indicaciones para llegar a un restaurante. Al llegar, pueden tomar una foto del menú y escuchar las opciones. Si luego quieren quemar las calorías adicionales en un gimnasio, pueden usar la cámara de su teléfono inteligente para encontrar una caminadora.

“Sé que estamos en medio de un ciclo de exageración de la IA en este momento, pero varios de nuestros probadores beta han usado la frase ‘cambio de vida’ al describir el producto”, dice Mike Buckley, director ejecutivo de By My Eyes, a TNW.

“Esto tiene la oportunidad de ser transformador al empoderar a la comunidad con recursos sin precedentes para navegar mejor en entornos físicos, abordar las necesidades cotidianas y obtener más independencia”.

Voluntariado Virtual aprovecha una actualización del software de OpenAI. A diferencia de las iteraciones anteriores de los modelos de la empresa, GPT-4 es multimodal, lo que significa que puede analizar imágenes y texto como entradas.

Be My Eyes aprovechó la oportunidad de probar la nueva funcionalidad. Si bien los sistemas de texto a imagen no son nada nuevo, la startup nunca antes había estado convencida del rendimiento del software.

“Desde demasiados errores hasta la incapacidad de conversar, las herramientas disponibles en el mercado no estaban equipadas para resolver muchas de las necesidades de nuestra comunidad”, dice Buckley. “El reconocimiento de imágenes que ofrece GPT-4 es superior, y las capas analíticas y conversacionales impulsadas por OpenAI aumentan el valor y la utilidad exponencialmente”.

Be My Eyes anteriormente apoyaba a los usuarios exclusivamente con voluntarios humanos. Según OpenAI, la nueva función puede generar el mismo nivel de contexto y comprensión. Pero si el usuario no obtiene una buena respuesta o simplemente prefiere una conexión humana, aún puede llamar a un voluntario.

A pesar de los primeros resultados prometedores, Buckley insiste en que el servicio gratuito se implementará con cautela. Los probadores beta y más amplios la comunidad jugará un papel central en la determinación de este proceso.

En última instancia, Buckley cree que la plataforma brindará a los usuarios apoyo y oportunidades. Be My Eyes también pronto ayudará a las empresas a brindar un mejor servicio a sus clientes al priorizar la accesibilidad.

“Es seguro decir que la tecnología podría dar a las personas ciegas o con problemas de visión no solo más poder, sino también una plataforma para que la comunidad comparta aún más sus talentos con el resto del mundo”, dice Buckley. “Para mí, esa es una posibilidad increíblemente convincente”.

Si usted o alguien que conoce tiene problemas de visión y quiere probar el Voluntario Virtual, puede Regístrese para la lista de espera aquí.