Tecnología utilizada
MediaPipe y OpenCV.
TensorFlow/Keras.
API audiovisual.
Síntesis de voz.
Cloudflare R2.
ILSE (Intérprete de Lengua de Señas Electrónico) es un sistema integral de asistencia tecnológica desarrollado por jóvenes estudiantes con el objetivo de facilitar la comunicación entre personas sordas y oyentes en tiempo real. Utiliza visión por computadora e inteligencia artificial para reconocer gestos capturados por una cámara, procesarlos mediante modelos entrenados con puntos clave (landmarks) de manos y cuerpo, y traducirlos automáticamente a texto y voz sintetizada. A su vez, permite que personas oyentes respondan mediante reconocimiento de voz, transformando el habla en texto visible para el usuario sordo. Todo el proceso se ejecuta de forma fluida e interactiva, brindando una solución accesible, inclusiva y completamente automatizada..
MediaPipe y OpenCV.
TensorFlow/Keras.
API audiovisual.
Síntesis de voz.
Cloudflare R2.
El proceso de captura de datos para el entrenamiento del modelo en el proyecto ILSE se realiza mediante la colaboración con una persona sorda experta en lengua de señas. Durante las sesiones, se registran en video los gestos correspondientes a distintas etiquetas, y posteriormente se procesan con tecnologías de visión por computadora.
Este modelo ha sido optimizado para interpretar señales visuales mediante landmarks, permitiendo una detección precisa y en tiempo real de señas específicas..
ILSE convierte las señas detectadas en texto y voz mediante un sistema de síntesis integrado, lo que permite que personas oyentes comprendan el mensaje de forma inmediata. Además, utiliza reconocimiento de voz para transcribir lo que dicen los oyentes, mostrando el texto en pantalla para el usuario sordo, creando así una comunicación bidireccional accesible..
ILSE cuenta con una API personalizada que genera respuestas en video según las frases detectadas. Esta API organiza y entrega de forma dinámica secuencias de clips previamente etiquetados, permitiendo que el sistema responda en lengua de señas mediante avatares o grabaciones reales, reforzando la comprensión visual del mensaje para el usuario sordo..
Observa los pasos, los detalles de como se crea y se ejecuta IlSE.
se realiza mediante la colaboración con una persona sorda experta en lengua de señas. Durante las sesiones, se registran en video los gestos correspondientes a distintas etiquetas
ILSE es un sistema con inteligencia artificial que traduce señas a texto y voz, y voz a texto, permitiendo comunicación fluida entre sordos y oyentes, e integrando un avatar que responde en lengua de señas.
Clases inclusivas y accesibles
Facilita la comunicación entre alumnos sordos y docentes mediante interpretación en tiempo real.
Conversaciones sin barreras
Un puente de inclusión que permite que todos sean vistos y escuchados.
Atención accesible en servicios
Facilita la atención a la comunidad sorda en oficinas, comercios y espacios de servicio.
ILSE (Intérprete de Lengua de Señas Electrónico) nació como una idea para ayudar a las personas sordas a comunicarse en tiempo real utilizando inteligencia artificial. Lo que comenzó como un sueño ganó fuerza al triunfar en el Hackathon Jalisco, impulsándonos a desarrollar este proyecto a gran escala.
Somos un equipo de jóvenes estudiantes apasionados y comprometidos con la inclusión, pero necesitamos tu apoyo para seguir avanzando. Actualmente, buscamos inversionistas que compartan nuestra visión para adquirir los recursos tecnológicos esenciales que permitirán llevar a ILSE al siguiente nivel.
Con tu inversión, contribuirás directamente a mejorar la calidad de vida y la comunicación de miles de personas sordas, brindando oportunidades reales de inclusión social mediante la tecnología.
Sé parte de esta historia, invierte en el futuro de la inclusión.
ILSE no almacena imágenes ni datos del usuario. La interpretación se realiza de forma local o controlada, y el sistema está protegido contra replicación mediante licencias, servidores cifrados y barreras técnicas.
Instagram: @produ.charro
Teléfono: 33 2445 1457
Correo: [email protected]
Fotos y videos por Producciones El Charro.