Blog

Questa IA riconosce uno strumento e isola il suo suono dal resto, anche quando più suoni contemporaneamente

Questa IA riconosce uno strumento e isola il suo suono dal resto, anche quando più suoni contemporaneamente

Questa IA riconosce uno strumento e isola il suo suono dal resto, anche quando più suoni contemporaneamente

L’intelligenza artificiale era già in grado di identificare una voce dalla folla; È molto più complesso che identificare un oggetto all’interno di un’immagine in cui compaiono diversi, rendendolo in qualche modo sorprendente, ma non impossibile. Ma ciò che il Massachusetts Institute of Technology (MIT) ha ora ottenuto è forse ancora di più: hanno fatto in modo che un’intelligenza artificiale possa identificare uno strumento specifico all’interno di un gruppo di strumenti.

Cioè, potresti dare a questo robot una canzone strumentale e sarebbe in grado di isolare il suono di ciascuno degli strumenti. Quindi, può anche disattivare gli strumenti. Se senti un pianoforte e un violino in una canzone e vuoi disattivare l’audio del primo, puoi farlo. Ace è PixelPlayer, l’IA sviluppata dal MIT.

Rimuovi gli strumenti da una scena, la nuova IA del MIT

Come possiamo vedere nel video qui sotto, è in grado di farlo grazie all’utilizzo di reti neurali, associando regioni di pixel a frequenze specifiche e separandole successivamente. In altre parole, puoi fare clic sulla parte del video in cui si trova uno strumento e isolarne il suono. Lo fa anche quando i suoni sono molto simili, come una tromba e una tuba, due strumenti a fiato con suoni simili.

Intelligenza artificiale è stato insegnato e formato per 60 ore utilizzando una tecnica di apprendimento profondo auto-supervisionato. Ma c’è ancora tanta strada da fare; per ora, riconosce solo 20 strumenti e ha ancora pochi problemi a identificare alcuni strumenti l’uno dall’altro se sono molto simili.

Questo ha molte applicazioni oltre le quali è molto curioso: può essere utilizzato per ripristinare il suono di vecchi film o vecchi concerti (immagina di poter rimuovere tutto il rumore di fondo da un concerto registrato in vivere; eliminare i rumori di fondo identificati, come il rumore di una lavatrice o l’abbaiare di un cane; utilità con molti.

Articoli correlati

Botón volver arriba

Ad blocker detected

You must remove the AD BLOCKER to continue using our website THANK YOU