Hace seis años, Weinberg recibió un correo electrónico del instructor del Instituto de Música de Atlanta, Eric Sanders, quien presentó a Weinberg a Barnes. Sanders y Barnes estaban buscando a alguien que tuviera experiencia con robots musicales y, después de ver videos de Shimon , un robot musical que Weinberg desarrolló utilizando algoritmos, Barnes y Sanders sabían que habían encontrado a la persona adecuada.
Weinberg solo había desarrollado robots que eran entidades separadas, lo que significa que las máquinas no estaban unidas o incrustadas en cuerpos humanos. Pero después de conocer a Barnes, Weinberg comenzó a experimentar con nuevas formas y maneras.
Barnes fue quemado en un accidente eléctrico, y su brazo derecho fue amputado debajo del codo. El baterista hizo una prótesis improvisada.
Pero sintió que la prótesis carecía de competencia, y buscó algún tipo de control robótico que mejorara sus músculos, replicara los movimientos que su muñeca solía hacer y produjera más expresiones.
Weinberg estuvo de acuerdo con el desafío pero animó a Barnes a seguirlo un paso más para incorporar dos baquetas en lugar de una.
Mientras que un palo le permitiría a Barnes reproducir música, el segundo le permitiría improvisar o usar inteligencia artificial.
“Se llama bastón con una mente propia”, dijo Weinberg.
Barnes estuvo de acuerdo, y Weinberg instaló una aplicación que permite que un segundo palo emerja tan pronto como Barnes levante su brazo.
Inicialmente, Weinberg usó EMG o electromiografía, que envía señales eléctricas desde los músculos de Barnes al brazo robótico. Dependiendo de si su músculo se contrae o se relaja, Barnes puede generar un golpe del palo y cambiar la fuerza con la que se juega.
Sin embargo, la prótesis no fue capaz de proporcionar más precisión o reproducir el control dedo por dedo que los percusionistas usan con ambas manos. Weinberg trató de lograr una mayor precisión mediante el uso de agujas similares a la acupuntura, pero no sabía exactamente dónde colocarlas hasta que utilizó una máquina de ultrasonido para rastrear los músculos.
“Ese fue un momento eureka para nosotros”, dijo Weinberg. “Notamos una correlación directa entre el lugar donde se movía el músculo y los diferentes dedos”.
Como resultado, Weinberg podría simplemente examinar las señales de ultrasonido para determinar qué músculo se correlacionaba con el dedo fantasma en lugar de usar agujas, un proceso que según Weinberg era un poco invasivo de todos modos.
Weinberg tiene múltiples patentes sobre la tecnología de ultrasonido, que él describe como revolucionario. Dijo: “Todas las prótesis en el mercado usan EMG, pero creamos algo que permite un control más ambidiestro, que puede cambiar la vida de los amputados de una manera nueva y emocionante”.
Cada una de las varillas de la prótesis, dijo Weinberg, puede emitir 20 hertz. Con el otro brazo de Barnes, el palo puede golpear 40 hercios. Barnes también tiene la capacidad de jugar con un brazo, lo que Weinberg llama “polirritmia”. Mientras que un palo juega 20 hercios, otro juega 18, creando diferentes polirritmos.
Además de los “sticks”, Weinberg desarrolló un sistema que permite a Barnes tocar el piano. Barnes puede mover sus músculos como si estuviera moviendo los dedos, y una señal luego se transfiere desde su cerebro a los músculos y la prótesis para llevar a cabo la actuación.
Pero Georgia Tech, donde se desarrolló la prótesis, no permite que Barnes viaje con la prótesis ni la posea. Como resultado, Weinberg comenzó una campaña de Kickstarter que tiene como objetivo recaudar $ 70,000 para crear la prótesis y $ 20,000 adicionales para crear productos de la música.
Una gran parte del dinero, dijo Weinberg, se usará para crear una prótesis que Barnes pueda poseer y usar para convertirse en el músico que siempre quiso ser.
Los donantes recibirán entradas para espectáculos de Barnes, mercancía y música descargable y videos de sus actuaciones.
“El brazo no solo me ha devuelto mi habilidad para jugar, sino que también me ha hecho más creativo en la forma en que juego”, dijo Barnes. “Se abrieron oportunidades que nunca pensé que fueran posibles. Me alegro de haber conocido a Gil y su equipo, y espero trabajar con ellos mucho más tiempo “.