brain-2-music-Smartphonegreece neurosciencenews

Η μουσική που ακούμε, δημιουργεί συγκεκριμένα εγκεφαλικά μοτίβα που η τεχνητή νοημοσύνη μπορεί να χρησιμοποιήσει για να δημιουργήσει τον ίδιο ήχο. Να πώς.

Η Google δεν είναι καινούργια στη χρήση της τεχνητής νοημοσύνης για τη δημιουργία μουσικής, λανσάροντας το MusicLM της τον Ιανουάριο για τη δημιουργία μουσικής από κείμενο. Τώρα η Google έχει ανεβάσει τα επίπεδα και χρησιμοποιεί την τεχνητή νοημοσύνη για να διαβάζει τον εγκέφαλό σας — και να παράγει ήχο με βάση τη δραστηριότητα του εγκεφάλου σας. 

Σε μια νέα ερευνητική εργασία,Το Brain2Music , η Google χρησιμοποιεί τεχνητή νοημοσύνη για την ανασύσταση της μουσικής από τη δραστηριότητα του εγκεφάλου, όπως φαίνεται μέσω των δεδομένων λειτουργικής απεικόνισης μαγνητικού συντονισμού (fMRI). 

Οι ερευνητές μελέτησαν τα δεδομένα fMRI που συλλέχθηκαν από πέντε άτομα που άκουσαν τα ίδια μουσικά κλιπ διάρκειας 15 δευτερολέπτων σε διαφορετικά είδη, όπως μπλουζ, κλασική, κάντρι, ντίσκο, χιπ-χοπ, τζαζ, μέταλ, ποπ, ρέγκε και ροκ. 

Στη συνέχεια χρησιμοποίησαν αυτά τα δεδομένα για να εκπαιδεύσουν ένα βαθύ νευρωνικό δίκτυο για να μάθουν για τη σχέση μεταξύ των προτύπων δραστηριότητας του εγκεφάλου και των διαφορετικών στοιχείων της μουσικής, όπως ο ρυθμός και το συναίσθημα. 

Μόλις εκπαιδευτεί, το μοντέλο μπορεί να ανακατασκευάσει μουσική από ένα fMRI χρησιμοποιώντας τη χρήση του MusicLM. Εφόσον το MusicLM παράγει μουσική από κείμενο, ρυθμίστηκε να δημιουργεί μουσική παρόμοια με τα αυθεντικά μουσικά ερεθίσματα σε σημασιολογικό επίπεδο. 

Όταν δοκιμάστηκε, η μουσική που παράχθηκε, έμοιαζε με τα μουσικά ερεθίσματα που άκουγε αρχικά ο συμμετέχων σε χαρακτηριστικά όπως το είδος, η ενορχήστρωση, η διάθεση και άλλα. 

Στον ιστότοπο της σελίδας έρευνας , μπορείτε να ακούσετε πολλά κλιπ από τα αυθεντικά μουσικά ερεθίσματα και να τα συγκρίνετε με τις ανακατασκευές που δημιούργησε το MusicLM. Τα αποτελέσματα είναι απίστευτα.

Για ένα κλιπ, το ερέθισμα ήταν ένα κλιπ 15 δευτερολέπτων του εμβληματικού «Oops!…I Did It Again» της Britney Spears. Οι τρεις ανακατασκευές είχαν ζωντανό και αισιόδοξο χαρακτήρα, όπως το πρωτότυπο. 

Ο ήχος, φυσικά, δεν μοιάζει πολύ με αυτόν του πρωτότυπου αφού η μελέτη επικεντρώνεται στα διαφορετικά στοιχεία της μουσικής και όχι στο στιχουργικό στοιχείο. 

Ουσιαστικά, το μοντέλο μπορεί να διαβάσει το μυαλό σας (τεχνικά τα μοτίβα του εγκεφάλου σας) για να παράγει μουσική παρόμοια με αυτή που ακούγατε

 

 

via