Robot naučio govoriti i pjevati pomoću umjetne inteligencije i gledajući ljude na YouTubeu

U studiji objavljenoj u časopisu Science Robotics, tim opisuje dvostepeni pristup "učenja opservacijom" umjesto programiranja fiksnih pravila za pokrete lica.

"U ovom projektu smo koristili vještačku inteligenciju za obuku robota, tako da je naučio kako pravilno koristiti usne", rekao je Hod Lipson, profesor inovacija na Odsjeku za mašinstvo.

Prvo robotsko lice pokretano s 26 motora generisalo je hiljade nasumičnih izraza dok je bilo okrenuto prema ogledalu, učeći kako motorne komande mijenjaju vidljive oblike usta.

Zatim je sistem posmatrao snimke ljudi koji razgovaraju i pjevaju te je učio kako se pokreti ljudskih usta odnose na emitirane zvukove.

"To učenje je svojevrsni model interakcije 'motor-in-face'. Koristeći te naučene informacije o tome kako se kreće i kako se ljudi kreću, mogao bi ih nekako kombinovati i naučiti kako da pokreće svoje motore kao odgovor na različite zvukove i različite audio zapise", rekao je Lipson.

Kombinacijom oba modela, robot bi mogao da prevede dolazni zvuk u koordinisane motorne akcije i sinhronizovati pokrete usana na različitim jezicima i kontekstima bez razumijevanja značenja audio zapisa, rekli su istraživači.

Također, pokazali su kako njihov robot koristi svoje sposobnosti artikulacije riječi da bi čak otpjevao pjesmu pod nazivom "metalman“ sa svog debitantskog albuma "hello world_" generisanog vještačkom inteligencijom.

Rezultati nisu savršeni. Tim je prijavio poteškoće sa zvukovima kao što su "B" i "W", ali je dodao da bi se performanse trebale poboljšati.

Lipson je kazao da je njihovo istraživanje pokreta usana dio šireg napora ka prirodnijoj komunikaciji robota u primjenama kao što su zabava, obrazovanje i okruženje za njegu.

"Garantujem vam da će uskoro ovi roboti izgledati tako ljudski. Ljudi će ih početi povezivati ​​i to će biti nevjerovatno moćna i revolucionarna tehnologija“, zaključio je Lipson.