Con la finalidad de hacer más incluyentes las videollamadas, Google ha desarrollado un nuevo sistema el cual permitirá que se identifique en tiempo real cuando una persona hace uso de la lengua de señas, con esto será posible destacarlos en las videollamadas grupales y así hacerlas más accesibles para ellos.
Gracias a investigadores de Google Research fue que se desarrollo este modelo, el cual está basado en la estimación de las poses para poder identificar a las personas hablantes de aquellas que hacen uso de la lengua de señas para comunicarse.
Este sistema fue presentado en la conferencia europea de visión computarizada ECCV’20, se detalló que su diseño es ligero para poder reducir la carga necesaria para poder ejecutarlo y no afectar la calidad de las llamadas, asimismo, se mencionó que utiliza ‘PoseNet’, modelo que reduce los datos de la imagen en marcadores de ojos, nariz, manos y hombros de los usuarios con la finalidad de poder detectar el movimiento.
El modelo presentado por Google ha presentado un 80% de efectividad, detectando a los usuarios de la lengua de señas utilizando 0,000003 segundos de datos, utilizando 50 fotogramas la efectividad es de hasta 83.4%. De igual manera, los investigadores añadieron una capa adicional que incluye “memoria sobre los pasos de tiempo anteriores, pero sin retroceso”, con esto se logra una efectividad de 91.5% en 3,5 milisegundos.
Los investigadores se han encargado de hacer la herramienta compatible con las plataformas de videollamada, el sistema emite ondas de sonidos ultrasónicas al momento de detectar a una persona que utiliza la lengua de señas, estas ondas no son detectadas por los demás participantes, sin embargo, sus tecnologías de detección de habla sí las pueden percibir, con esto será posible que destaquen a dichos usuarios.
Mediante la plataforma ‘GitHub’ se ha publicado el código abierto para este modelo, los investigadores esperan que su herramienta se aproveche y beneficie a la comunidad que emplea la lengua de señas para poder hacer las videoconferencias más convenientes para ellos.