Detección del abecedario de Lengua de Señas Mexicanas (LSM) usando MediaPipe, SVM y Random Forest

Resumen

En la actualidad la mayoría de las personas cuenta con dispositivos electrónicos que les permiten acceder a Internet, investigar información, comunicarse con otros usuarios en el mundo, realizar compras, mantener la colaboración entre proveedores y clientes, etc.; esos dispositivos también se pueden aprovechar como herramienta para desarrollar o implementar software que ayude a eliminar la brecha de comunicación existente entre personas con discapacidad auditiva y las oyentes. Por tal razón, en esta investigación se propone un software que permite detectar los gestos del abecedario de la Lengua de Señas Mexicanas, utilizando la tecnología MediaPipe para analizar y tomar información de fotografías donde aparecen las letras, con la cual se obtiene un vector con las características de las imágenes y para la clasificación se realizaron pruebas con SVM y Random Forest donde se obtuvieron resultados entre 97.3 % y 99.4%.