ΕπόμενοΕπόμενος οδηγός
Συμβολική Μουσική Γενιά
Ήχος AI
ΟΔΗΓΟΣ Audio AI
Αυτόματη μεταγραφή μουσικής
Η Αυτόματη Μεταγραφή Μουσικής (AMT) μετατρέπει μια ακατέργαστη ηχογράφηση μουσικής σε μια συμβολική σημειογραφία, όπως παρτιτούρες, MIDI ή ρολό πιάνου.
Ακούστε αυτόν τον οδηγόαφήγηση με AI · ~2 min
Σε αυτήν τη σελίδα2 λεπτά ανάγνωση
Επισκόπηση
Αντιμετωπίζει ένα από τα πιο δύσκολα προβλήματα στην τεχνητή νοημοσύνη ήχου: ξεμπερδεύει πολλές επικαλυπτόμενες νότες που παίζονται ταυτόχρονα.
Βαθιά κατάδυση
Τα συστήματα AMT ακούν μια κυματομορφή ήχου και εξάγουν ποιες νότες παίζονται, πότε ξεκινούν, πόσο διαρκούν και μερικές φορές ποιο όργανο τις παίζει. Η βασική πρόκληση είναι η πολυφωνία: όταν πολλές νότες ακούγονται ταυτόχρονα, οι αρμονικές τους επικαλύπτονται και θολώνουν μαζί στο φάσμα συχνοτήτων, έτσι ένα μεμονωμένο C και ένα G μπορεί να είναι δύσκολο να διαχωριστούν από μια ενιαία πιο δυνατή νότα. Τα σύγχρονα συστήματα μετατρέπουν τον ήχο σε μια αναπαράσταση χρονικής συχνότητας, όπως ένα φασματογράφημα mel ή το Constant-Q Transform, και στη συνέχεια χρησιμοποιούν βαθιά νευρωνικά δίκτυα για να προβλέψουν τις ενάρξεις, τις μετατοπίσεις και τις φωνές. Το μοντέλο Onsets and Frames του Google ήταν ορόσημο για τη μεταγραφή πιάνου, ενώ τα νεότερα μοντέλα μετασχηματιστών όπως το MT3 μεταγράφουν πολλά όργανα ταυτόχρονα.
Υλοποίηση σε πραγματικό κόσμο
AnthemScore και παρόμοιες εφαρμογές που μετατρέπουν εγγραφές MP3 σε επεξεργάσιμες παρτιτούρες για μουσικούς που μαθαίνουν τραγούδια με το αυτί
Εξαγωγή MIDI από ηχογράφηση πιάνου, ώστε ο παραγωγός να μπορεί να επαναλάβει τη φωνή ή να μετρήσει την απόδοση σε ένα DAW
Εργαλεία μουσικής εκπαίδευσης που συγκρίνουν τις νότες που έπαιξε ένας μαθητής με την παρτιτούρα για να επισημάνουν λάθος ή χαμένες νότες
Μουσικολόγοι που μεταγράφουν ιστορικές ή αυτοσχέδιες ηχογραφήσεις (όπως σόλο τζαζ) σε σημειογραφία για ανάλυση
Το μέλλον της αυτόματης μεταγραφής μουσικής
Το AMT κινείται από το σόλο πιάνο προς την αξιόπιστη μεταγραφή πολλών οργάνων και πλήρους μπάντας, συμπεριλαμβανομένων των ντραμς, των φωνητικών και των εκφραστικών τεχνικών όπως το bend και το vibrato. Οι αρχιτεκτονικές μετασχηματιστών που έχουν εκπαιδευτεί σε μεγάλα συνθετικά και ευθυγραμμισμένα σύνολα δεδομένων κλείνουν το χάσμα. Αναμένετε στενότερη ενσωμάτωση με διαχωρισμό πηγών, μεταγραφή σε πραγματικό χρόνο για ζωντανή απόδοση και εργαλεία που καταγράφουν μικροχρονισμό και δυναμική, όχι μόνο σημειώσεις. Ο μακροπρόθεσμος στόχος είναι ένα σύστημα που μετατρέπει οποιαδήποτε εγγραφή σε επεξεργάσιμη, αναγνώσιμη από τον άνθρωπο σκορ.
Κάνοντάς το στην πράξη
Γιατί έχει σημασία
- Πρόσβαση και προσέγγιση χρηστών. Βελτιώνει την προσβασιμότητα μέσω διασυνδέσεων μεταγραφής, αφήγησης και φωνής.
- Κόστος και προϋπολογισμός. Οι ομάδες πολυμέσων μπορούν να αποστέλλουν γυαλισμένο ήχο πιο γρήγορα με μικρότερους προϋπολογισμούς.
- Ταχύτητα και κλίμακα. Τα συστήματα που αντιμετωπίζουν πελάτες μπορούν να επεξεργάζονται προφορικές αλληλεπιδράσεις σε μεγαλύτερη κλίμακα.
Προσέξτε
- Οι κίνδυνοι κατάχρησης φωνής και πλαστοπροσωπίας αυξάνονται όταν λείπει η συγκατάθεση.
- Η ακρίβεια μπορεί να πέσει σε τόνους, διαλέκτους ή θορυβώδη περιβάλλοντα.
- Ο συνθετικός ήχος μπορεί να εκληφθεί εσφαλμένα ως αυθεντική ομιλία χωρίς σαφή σήμανση.
Επόμενα βήματα
- Λάβετε ρητή συγκατάθεση για λήψη φωνής, κλωνοποίηση και επαναχρησιμοποίηση.
- Δοκιμάστε την ποιότητα σε διαφορετικά ηχεία και συνθήκες φόντου.
- Καθορίστε πότε ένας άνθρωπος πρέπει να επανεξετάσει ή να εγκρίνει τα αποτελέσματα.
- Επισημάνετε τον συνθετικό ήχο και κρατήστε αρχεία προέλευσης για υπευθυνότητα.
Συνεχίστε την εξερεύνηση
Δωρεάν ενημερωτικό δελτίο
Λάβετε την καθημερινή ενημέρωση AI
Τρία επαληθευμένα νέα AI κάθε πρωί της εβδομάδας, γραμμένα σε απλή αγγλική. Δωρεάν για πάντα, χωρίς διαφημίσεις.
Ένα email κάθε εργάσιμη ημέρα. Κατάργηση συνδρομής με ένα κλικ. Δεν πουλάμε ή μοιραζόμαστε ποτέ τη διεύθυνσή σας.
Δοκιμάστε τον εαυτό σας
Take the Automatic Music Transcription quiz
Άμεση ανάδραση σε κάθε απάντηση, και πιστοποιητικό με επαληθεύσιμο ID μόλις περάσετε το μάθημα.
Υποστηρίξτε τη δωρεάν εκπαίδευση AI. AI Understanding είναι μια μη κερδοσκοπική οργάνωση 501(c)(3) — χωρίς διαφημίσεις, χωρίς τοίχο πληρωμής, ποτέ. Κάντε μια δωρεά
Συχνές ερωτήσεις
Τι είναι η αυτόματη μεταγραφή μουσικής;
Η Αυτόματη Μεταγραφή Μουσικής (AMT) μετατρέπει μια ακατέργαστη ηχογράφηση μουσικής σε μια συμβολική σημειογραφία, όπως παρτιτούρες, MIDI ή ρολό πιάνου. Αντιμετωπίζει ένα από τα πιο δύσκολα προβλήματα στην τεχνητή νοημοσύνη ήχου: ξεμπερδεύει πολλές επικαλυπτόμενες νότες που παίζονται ταυτόχρονα.
Τι παράγει κυρίως η Αυτόματη μεταγραφή μουσικής;
Το AMT μετατρέπει μια ηχογράφηση σε συμβολική σημειογραφία, όπως MIDI, ρολό πιάνου ή παρτιτούρες που περιγράφουν τις νότες που παίζονται.
Γιατί είναι ιδιαίτερα δύσκολο να μεταγραφεί η πολυφωνική μουσική;
Όταν πολλαπλές νότες ακούγονται ταυτόχρονα, οι αρμονικές τους επικαλύπτονται, καθιστώντας δύσκολο τον διαχωρισμό των επιμέρους τόνους που υπάρχουν.
Τι ήταν αξιοσημείωτο σχετικά με το μοντέλο Onsets and Frames του Google;
Τα Onsets and Frames χρησιμοποίησαν μια κεφαλή για να ανιχνεύσουν ακριβείς ενάρξεις νότας και μια άλλη για διαρκή τόνους, με τις ενάρξεις να περιορίζουν την έξοδο του καρέ.
Γιατί είναι χρήσιμο το Constant-Q Transform για μουσική;
Τα μουσικά γήπεδα χωρίζονται λογαριθμικά (οι οκτάβες διπλασιάζονται σε συχνότητα) και οι θέσεις καταγραφής του CQT ευθυγραμμίζονται φυσικά με αυτό.
Τι σημαίνει «έναρξη» στη μεταγραφή;
Ένα ξεκίνημα είναι η απότομη, ενεργητική στιγμή που ξεκινά μια νότα, η οποία είναι πιο εύκολο να εντοπιστεί με ακρίβεια παρά να διατηρηθεί.
Συνέχισε να μαθαίνεις
Σχετικοί οδηγοί
Επιλέχθηκαν περισσότεροι οδηγοί για αυτό το θέμα