Το AI σε πραγματικό χρόνο μπορεί να δημιουργήσει γραμμές για ζωντανή ενόργανη μουσική

Ερευνητές στο Εργαστήριο Επεξεργασίας Φυσικής Γλώσσας στο Πανεπιστήμιο του Waterloo ανέπτυξαν ένα σύστημα τεχνητής νοημοσύνης (AI) σε πραγματικό χρόνο που μπορεί να δημιουργήσει γραμμές για ζωντανή οργανική μουσική. Το νέο σύστημα ονομάζεται LyricJam και κυκλοφόρησε τον Ιούνιο του 2021 με πάνω από 1,500 χρήστες να το δοκιμάζουν από τότε.

Η ομάδα θα παρουσιάσει τους έρευνα στο Διεθνές Συνέδριο Υπολογιστικής Δημιουργικότητας τον Σεπτέμβριο. 

Το εργαστήριο διευθύνεται από την Olga Vechtomova, μια καθηγήτρια Μηχανικής που διορίστηκε μεταξύ τους στην Επιστήμη Υπολογιστών στο πανεπιστήμιο. Η Vechtomova αναπτύσσει εφαρμογές τεχνητής νοημοσύνης εδώ και χρόνια και η δουλειά του εργαστηρίου οδήγησε αρχικά στη δημιουργία ενός συστήματος που μαθαίνει τις μουσικές εκφράσεις των καλλιτεχνών πριν δημιουργήσει στίχους στο στυλ τους.

Οι μεταπτυχιακοί φοιτητές της Vechtomova και του Waterloo, Gaurav Sahu και Dhruv Kumas, ανέπτυξαν επίσης τεχνολογία που χρησιμοποιεί διαφορετικά μουσικά στοιχεία όπως προόδους χορδών, τέμπο και ενορχήστρωση. Η τεχνολογία είναι σε θέση να συνθέσει στίχους, ώστε να αντικατοπτρίζουν τη διάθεση και τα συναισθήματα που εκφράζονται από τη ζωντανή μουσική. 

Το Νευρωνικό Δίκτυο

Το σύστημα λαμβάνει συνεχώς ακατέργαστα κλιπ ήχου καθώς ένας μουσικός ή ένα συγκρότημα εκτελεί ορχηστρική μουσική. Μετά από αυτό, το νευρωνικό δίκτυο επεξεργάζεται τα δεδομένα πριν δημιουργήσει νέους στίχους, τους οποίους οι καλλιτέχνες μπορούν στη συνέχεια να χρησιμοποιήσουν για να αναπτύξουν τους στίχους των τραγουδιών τους.

«Ο σκοπός του συστήματος δεν είναι να γράψει ένα τραγούδι για τον καλλιτέχνη», λέει η Vechtomova. «Αντίθετα, θέλουμε να βοηθήσουμε τους καλλιτέχνες να συνειδητοποιήσουν τη δημιουργικότητά τους. Το σύστημα δημιουργεί ποιητικές γραμμές με νέες μεταφορές και εκφράσεις, οδηγώντας πιθανώς τους καλλιτέχνες σε δημιουργικές κατευθύνσεις που δεν έχουν εξερευνήσει πριν.»

Το νευρωνικό δίκτυο που αναπτύχθηκε πρόσφατα είναι σε θέση να μάθει ποια λυρικά θέματα και λέξεις συνδέονται με τις διαφορετικές πτυχές της μουσικής, και το πιο εντυπωσιακό είναι ότι το κάνει αυτό σε κάθε μεμονωμένο ηχητικό κλιπ. 

Η ομάδα πραγματοποίησε μια μελέτη χρηστών όπου οι μουσικοί έπαιζαν ζωντανή μουσική ενώ χρησιμοποιούσαν το σύστημα.

«Ένα απροσδόκητο εύρημα ήταν ότι οι συμμετέχοντες ένιωσαν ενθάρρυνση από τις παραγόμενες γραμμές να αυτοσχεδιάσουν», είπε η Vechtomova. «Για παράδειγμα, οι γραμμές ενέπνευσαν τους καλλιτέχνες να δομήσουν τις συγχορδίες κάπως διαφορετικά και να οδηγήσουν τον αυτοσχεδιασμό τους σε μια νέα κατεύθυνση από αυτήν που αρχικά προβλεπόταν. Μερικοί μουσικοί χρησιμοποίησαν επίσης τις γραμμές για να ελέγξουν αν ο αυτοσχεδιασμός τους είχε το επιθυμητό συναισθηματικό αποτέλεσμα».

Συνεργασία με AI

Μια άλλη από τις κύριες πτυχές αυτής της έρευνας ήταν η επίδειξη της συνεργασίας και της συν-δημιουργικότητας μεταξύ των ανθρώπων και της τεχνητής νοημοσύνης. Σύμφωνα με τους συμμετέχοντες, το σύστημα ενήργησε ως μουσικός συνεργάτης, και ένας που δεν ήταν κριτικός, γεγονός που επέτρεψε στους μουσικούς να παίζουν απεριόριστα. Είπαν επίσης ότι ένιωθαν ενθάρρυνση να παίξουν τα μουσικά όργανα ακόμα κι αν δεν εργάζονταν σε στίχους.

Το νέο σύστημα LyricJam είναι το πιο πρόσφατο παράδειγμα του τρόπου με τον οποίο η τεχνητή νοημοσύνη μπαίνει στο δημιουργικό μας μυαλό. Ενώ μιλάμε πάντα για τη σύνδεση μεταξύ ανθρώπων και τεχνητής νοημοσύνης, συχνά αφορά τομείς όπως η υγεία. Με νέες εξελίξεις όπως αυτές, πλησιάζουμε στο να συνδεόμαστε και με αυτά τα μηχανήματα με δημιουργικό τρόπο.

Μπορείτε να βρείτε το σύστημα LyricJam εδώ.