SignAloud – guantes que transliteran el lenguaje de señas en texto y voz

POR DAVID LUMB 

Dos estudiantes universitarios de UW ganaron $ 10,000 por construir un guante cargado de gadgets que traduce los gestos del lenguaje de señas en audio.

Estos estudiantes construyeron un guante que traduce el lenguaje de señas al inglés
[FOTO: DENNIS WISE, UNIVERSIDAD DE WASHINGTON]

Un par de estudiantes de la Universidad de Washington hicieron un guante que traduce gestos en lenguaje de señas americano (ASL) al inglés y lo habla a través de oradores. El guante SignAloud les ganó un Premio de Lemelson-MIT Student de $ 10,000 y atención internacional. Ahora están descubriendo cómo perfeccionar sus dispositivos para el bien social … y asegurarse de que aprueben sus exámenes universitarios.

El guante SignAloud captura gestos ASL con sensores que miden todo, desde las coordenadas XYZ hasta la forma en que los dedos se flexionan o doblan. Los datos del sensor se envían a través de Bluetooth a una computadora cercana y se envían a algoritmos de codificación que categorizan los gestos, que se traducen al inglés y luego se los habla por el altavoz. Pero el co-creador Navid Azodi enfatiza que SignAloud todavía está en una fase de prototipo.

“Tenga en cuenta que de ninguna manera hemos capturado todo el lenguaje y no estamos cerca de eso”. [ASL] es más que solo palabras y frases, y lo sabemos. Tiene estructuras gramaticales complejas. Lo que finalmente queremos obtener es que SignAloud clasifique la mayoría del idioma “, dice Azodi.

https://www.youtube.com/watch?v=l01sdzJHCCM

Los dos creadores, Azodi y su compañero de segundo año Thomas Pryor, planearon y construyeron SignAloud en sus dormitorios y CoMotion MakerSpace de la escuela. Después de una primera versión aproximada construida en cartón y cuerda, juntaron el prototipo actual de trabajo por alrededor de cien dólares en partes.

“Muchos de los dispositivos de traducción de lenguaje de señas que ya existen no son prácticos para el uso diario. Algunos usan entrada de video, mientras que otros tienen sensores que cubren todo el brazo o el cuerpo del usuario “, dice Pryor en un comunicado de prensa de UW .

Innovar más allá de las limitaciones existentes es lo que le ganó al equipo el premio de $ 10,000, que Azodi no está seguro de cómo van a gastar. El dinero podría ayudarles a pagar su matrícula o tal vez incluso conseguirles una buena cena, Azodi bromea, pero refinar su dispositivo es la máxima prioridad. Ambos están motivados por las posibilidades de SignAloud, como un dispositivo de entrada y una herramienta de empoderamiento.

“La comunicación es un derecho humano fundamental”, dice Azodi, cuya experiencia personal ayudó a informar la herramienta. “Cuando era joven, en realidad no hablé durante unos siete años de mi vida. Tenía siete años cuando finalmente comencé a hablar. Tuve esa barrera de comunicación por una buena cantidad de tiempo “.

Azodi y Pryor se conocieron cuando eran novatos. Compartieron el deseo de devolverle algo al mundo utilizando sus talentos de ingeniería y su considerable experiencia . Azodi ha sido pasante de sistemas para la NASA, un líder tecnológico para UW Information Technology y un representante del campus para Apple; Pryor ha tenido pasantías en Raytheon y Boeing, es investigador de pregrado en el Laboratorio de estructuras compuestas y es un líder de software en el equipo de robótica de Husky.

Antes de compilar la próxima versión de SignAloud, Azodi y Pryor van a considerar las críticas que recibieron a medida que las noticias sobre su subvención se volvieron globales. Azodi lamenta que el dispositivo fue retratado como una herramienta que hablaría por las personas que no pueden hablar.

[SignAloud]
FOTO: DANIEL KIM, THE DAILY EN LA UNIVERSIDAD DE WASHINGTON

 

“[SignAloud] no es algo que hablará por ellos. Ellos tienen una voz y hablan. Honestamente, hablan mucho más fluidamente de maneras dinámicas y hermosas utilizando sus cuerpos “, dice Azodi. “Esta es una herramienta más para romper esas barreras entre el lenguaje físico de ASL y el inglés o el español”.

SignAloud podría incluso ayudar a traducir ASL a otros idiomas, o ser utilizado como un dispositivo de entrada puro de ASL en una computadora, dice Azodi. Incluso en su estado actual, SignAloud también podría funcionar como una herramienta de enseñanza para las personas que desean aprender ASL, ya que podría darles a los estudiantes información instantánea sobre lo que realmente estaban firmando.

Teniendo en cuenta los comentarios internacionales que han recibido, Azodi está decidida a asegurarse de que el equipo haga los deberes para aprender la sintaxis profunda de ASL, algo con lo que probablemente contraten a un experto para que los ayude. Azodi y Pryor sabían que usar un dispositivo para traducir ASL sería un desafío, pero no anticiparon la dificultad que encontrarían a la hora de rastrear los matices del lenguaje. Y las críticas que recibieron después de que SignAloud fuera publicitado por la prensa los sorprendieron.

“Ninguna de mis experiencias previas puede compararse con ser puesto en el punto de mira nacional y tener personas en todo el mundo lanzando sus críticas y puntos de vista sobre él. Me abrió los ojos a mucho más “, dice Azodi. “Ese proceso de aprendizaje fue uno de, si no la experiencia más humillante. La gente lo llamó un dispositivo milagroso, y no lo es. No se trata de ayudar a las personas; ellos no necesitan ayuda. Se trata de cómo la tecnología puede ser accesible e inclusiva. Es solo un medio de construir puentes y romper barreras “.

 “Somos solo un par de estudiantes universitarios”.

No toda la atención que el dúo recibió fue negativa: gracias a la cobertura de los medios, Azodi y Pryor enfrentan una gran cantidad de ofertas de asociación e inversión. Pero no están precipitándose en nada. Después de todo, como estudiantes de segundo año de la universidad de 19 años, todavía tienen que preocuparse por cosas normales. Van a progresar en SignAloud, pero tienen que trabajar en su calendario de exámenes.

“Las oportunidades para algo como esto son increíbles, ni siquiera puedo categorizar a dónde puede llegar esto. ¿Cuál es la mejor opción para nosotros usando lo que sabemos y lo que podemos hacer? “, Dice Azodi. “No te daré una respuesta definitiva. Somos solo un par de estudiantes universitarios. Acabo de tener exámenes parciales y estamos preocupados acerca de cómo llegar a nuestras mayores “.

Fuente, fastcompany.com

https://youtube/l01sdzJHCCM

 

Robotic Arm, ayuda a baterista a vencer la discapacidad

 El profesor de Georgia Tech Gil Weinberg ha trabajado en robots musicales durante años, pero después de que el baterista Jason Barnes le pidiera que creara una prótesis que lo ayudaría a volver a tocar, Weinberg comenzó a experimentar con nuevas tecnologías.

Hace seis años, Weinberg recibió un correo electrónico del instructor del Instituto de Música de Atlanta, Eric Sanders, quien presentó a Weinberg a Barnes. Sanders y Barnes estaban buscando a alguien que tuviera experiencia con robots musicales y, después de ver videos de Shimon , un robot musical que Weinberg desarrolló utilizando algoritmos, Barnes y Sanders sabían que habían encontrado a la persona adecuada.

Weinberg solo había desarrollado robots que eran entidades separadas, lo que significa que las máquinas no estaban unidas o incrustadas en cuerpos humanos. Pero después de conocer a Barnes, Weinberg comenzó a experimentar con nuevas formas y maneras.

Barnes fue quemado en un accidente eléctrico, y su brazo derecho fue amputado debajo del codo. El baterista hizo una prótesis improvisada.

Pero sintió que la prótesis carecía de competencia, y buscó algún tipo de control robótico que mejorara sus músculos, replicara los movimientos que su muñeca solía hacer y produjera más expresiones.

Después de que un accidente de trabajo forzó la amputación de su brazo derecho debajo del codo, el baterista Jason Barnes recibió una prótesis robótica diseñada por el profesor de Georgia Tech, Gil Weinberg.
Después de que un accidente de trabajo forzó la amputación de su brazo derecho debajo del codo, el baterista Jason Barnes recibió una prótesis robótica diseñada por el profesor de Georgia Tech, Gil Weinberg.

Weinberg estuvo de acuerdo con el desafío pero animó a Barnes a seguirlo un paso más para incorporar dos baquetas en lugar de una.

Mientras que un palo le permitiría a Barnes reproducir música, el segundo le permitiría improvisar o usar inteligencia artificial.

“Se llama bastón con una mente propia”, dijo Weinberg.

Barnes estuvo de acuerdo, y Weinberg instaló una aplicación que permite que un segundo palo emerja tan pronto como Barnes levante su brazo.

Inicialmente, Weinberg usó EMG o electromiografía, que envía señales eléctricas desde los músculos de Barnes al brazo robótico. Dependiendo de si su músculo se contrae o se relaja, Barnes puede generar un golpe del palo y cambiar la fuerza con la que se juega.

Sin embargo, la prótesis no fue capaz de proporcionar más precisión o reproducir el control dedo por dedo que los percusionistas usan con ambas manos. Weinberg trató de lograr una mayor precisión mediante el uso de agujas similares a la acupuntura, pero no sabía exactamente dónde colocarlas hasta que utilizó una máquina de ultrasonido para rastrear los músculos.

“Ese fue un momento eureka para nosotros”, dijo Weinberg. “Notamos una correlación directa entre el lugar donde se movía el músculo y los diferentes dedos”.

Como resultado, Weinberg podría simplemente examinar las señales de ultrasonido para determinar qué músculo se correlacionaba con el dedo fantasma en lugar de usar agujas, un proceso que según Weinberg era un poco invasivo de todos modos.

Weinberg tiene múltiples patentes sobre la tecnología de ultrasonido, que él describe como revolucionario. Dijo: “Todas las prótesis en el mercado usan EMG, pero creamos algo que permite un control más ambidiestro, que puede cambiar la vida de los amputados de una manera nueva y emocionante”.

Cada una de las varillas de la prótesis, dijo Weinberg, puede emitir 20 hertz. Con el otro brazo de Barnes, el palo puede golpear 40 hercios. Barnes también tiene la capacidad de jugar con un brazo, lo que Weinberg llama “polirritmia”. Mientras que un palo juega 20 hercios, otro juega 18, creando diferentes polirritmos.

Además de los “sticks”, Weinberg desarrolló un sistema que permite a Barnes tocar el piano. Barnes puede mover sus músculos como si estuviera moviendo los dedos, y una señal luego se transfiere desde su cerebro a los músculos y la prótesis para llevar a cabo la actuación.

Pero Georgia Tech, donde se desarrolló la prótesis, no permite que Barnes viaje con la prótesis ni la posea. Como resultado, Weinberg comenzó una campaña de Kickstarter que tiene como objetivo recaudar $ 70,000 para crear la prótesis y $ 20,000 adicionales para crear productos de la música.

Una gran parte del dinero, dijo Weinberg, se usará para crear una prótesis que Barnes pueda poseer y usar para convertirse en el músico que siempre quiso ser.

Los donantes recibirán entradas para espectáculos de Barnes, mercancía y música descargable y videos de sus actuaciones.

“El brazo no solo me ha devuelto mi habilidad para jugar, sino que también me ha hecho más creativo en la forma en que juego”, dijo Barnes. “Se abrieron oportunidades que nunca pensé que fueran posibles. Me alegro de haber conocido a Gil y su equipo, y espero trabajar con ellos mucho más tiempo “.

Fuente, atlantajewishtimes.timesofisrael.com

La Fortaleza de dos ganadores.

Hoy público un video que la psicóloga Liz Guerrero me compartio, y que tiene gran significado y sensibilidad con alguna discapacidad,en este caso una discapacidad locomotora, el video no solo demuestra las ganas de vivir de un hijo, sino tambien el compromiso de un padre y su amor, los cuales son valores sumamente importantes, ellos conforman el “Team Hoyt”.

Aca les dejo el comentario de la Psicóloga:

“Hoy comparto este video donde por más que desee describir su contenido me parece que las propias imágenes lo dicen TODO, sencillamente te invito a ser participe del AMOR ABSOLUTO, INFINITO y SIN LIMITES QUE VIVEN 2 GANADORES!!!

ADEMAS quiero mencionar que incluso en lo mas inimaginable, las personas con discapacidad motora, mental o sensorial podemos ser capaces de lograr grandes cosas y no precisamente para demostrar nuestras habilidades y fortalezas, sino por convicción de metas y logros personales… OJALA PERCIBAS EL MENSAJE DE INSERCION Y NO EXCLUSION, por que va inherente al video… TODOS, TODOS SOMOS PARTE DE CUALQUIER ESPACIO, SOLO FALTA LA OPORTUNIDAD para muchos.”

Lic. en Psic. Liz Guerrero

PD: Su opinión es muy importante asi que los invito a que opinen y comenten acerca del video.

Leer másLa Fortaleza de dos ganadores.