Naukowcy z University of Washington stworzyli sztuczną inteligencję o nazwie Audeo, która może odtwarzać realistyczną muzykę po prostu analizując nieme filmy z pianina.
Teraz nawet sztuczna inteligencja jest w stanie cyfrowo odtworzyć każdy dźwięk fortepianu w realistyczny sposób, po prostu analizując nieme wideo.
Zespół naukowców z University of Washington stworzył sztuczną inteligencję o nazwie Audeo, która zawiera rodzaj inteligentnego oprogramowania, które zostało wcześniej wyszkolone przy użyciu 172 000 klatek wideo pianisty Paula Bartona grającego muzykę klasycznych kompozytorów, takich jak Mozart czy Bach.
Audeo AI jest w stanie wirtualnie grać na pianinie
Po prostu analizując nieme wideo, Audeo AI jest w stanie dokładnie dowiedzieć się, które klawisze są naciskane i jaka jest ich kolejność. W ten sposób określa poszczególne notatki i ich układ. Jest również w stanie wyczuć, jak mocno uderzany jest każdy z klawiszy i jak długo są przytrzymywane, co pozwala obliczyć intensywność każdej nuty i jak długo pozostaje ona pod dźwiękiem kolejnych granych nut. Jakby tego było mało, sztuczna inteligencja jest również w stanie zrozumieć charakterystyczne właściwości akustyczne fortepianów.
Dane te są konwertowane do formatu, który może być zrozumiany przez cyfrowy syntezator, a kiedy ten syntezator odtwarza plik muzyczny, jest on bardzo zbliżony do oryginalnego brzmienia fortepianu.
W jednym z niesamowitych testów Audeo AI była w stanie nauczyć się piosenki dzięki niemym filmom kompozytora Bartona, który grał charakterystyczne utwory muzyczne.
Następnie aplikacje do rozpoznawania muzyki, takie jak SoundHound, analizowały takie produkcje wykonywane przez sztuczną inteligencję, będąc w stanie rozpoznać utwór z dokładnością do około 86%. Dla porównania, gdy aplikacja analizowała oryginalny dźwięk fortepianu, dokładność rozpoznawania wzrosła do 93%.
