- Los investigadores de Google Deep Mind han estado desarrollando herramientas para utilizar la IA para interpretar el lenguaje de señas.
- Ahora, en la última actualización de Gboard de Google, vemos que el teclado se prepara para aceptar la entrada de firma de texto.
- Las protecciones de privacidad mantendrían su video en el dispositivo y solo compartirían datos de gestos sin procesar con la IA en la nube de Google.
El teclado Gboard de Google no quiere más que ayudarte a convertir los pensamientos en tu cabeza en palabras en tu pantalla, lo más fácilmente posible. Ya tenemos muchas formas diferentes de lograrlo, desde el tradicional golpeteo de las letras hasta la tan hábil entrada de deslizamiento «Glide» y la moderna conveniencia de escribir por voz. Pero ahora Google podría estar a punto de mejorar seriamente su juego de accesibilidad, a medida que Gboard se prepara para comprender el lenguaje de señas.
Ser capaz de convertir automáticamente gestos de lenguaje de señas en texto escrito suena casi fantástico, pero con mejoras en la visión artificial y el procesamiento de inteligencia artificial, las estrellas finalmente se están alineando para hacer que esta hazaña no solo sea posible, sino también práctica. El año pasado, Google Deep Mind adelantó su modelo avanzado SignGemma para interpretar la entrada del lenguaje de señas, y ahora es posible que finalmente estemos viendo uno de sus primeros usos importantes.
Al comprobar los cambios presentes en la versión 17.8.3.939743344-beta-arm64-v8a de la aplicación Gboard, podemos echar un vistazo muy temprano a una nueva opción de entrada de firma de texto:
Si bien todavía no podemos hacer que la herramienta funcione, esta ventana emergente introductoria nos brinda una descripción general temprana de qué esperar.
Como puede ver, Google está construyendo esto con un modelo híbrido local/nube, procesando su entrada de video real en el dispositivo para extraer los gestos sin procesar y luego enviándolos a Google para que los analice y extraiga las palabras que está tratando de comunicar. Si bien eso suena un poco engorroso, existen claros beneficios de privacidad al no compartir el video real de tu firma, si eso no es totalmente necesario.
A pesar de que Google realizó el último tramo del procesamiento real en la nube, tenemos mucha curiosidad por saber si habrá restricciones de dispositivo sobre qué teléfonos podrán aprovechar la función Sign-to-Text.
Al buscar en la aplicación cadenas de texto relacionadas con esta capacidad, encontramos mensajes destinados a ayudar a los usuarios a mejorar su visibilidad ante la cámara:
Poor lighting. Try moving to a brighter spot.Incluso con una idea general clara de cómo funcionará probablemente la función Sign-to-Text, todavía tenemos muchas preguntas sobre los detalles más importantes aquí. Por ejemplo, parece probable que Google admita el lenguaje de señas estadounidense desde el principio, pero ¿qué pasa con el lenguaje de señas británico o cualquiera de las docenas de otras variantes regionales en todo el mundo? En este momento, todavía no tenemos una idea real de cómo podrían alinearse esas opciones.
Si bien es evidente que todavía hay más que aprender sobre esta herramienta, ya es fácil entusiasmarse con ella. Este tipo de solución de entrada es exactamente el tipo de cosas que los teléfonos inteligentes están especialmente equipados para ofrecer, y el hecho de que ésta pueda abrir nuevas opciones de comunicación para los usuarios que más las necesitan es realmente genial ver a Google trabajando en ello. Esperamos poder ofrecerle pronto una vista previa de su funcionamiento.
Gracias por ser parte de nuestra comunidad. Lea nuestra Política de comentarios antes de publicar.