SelanjutnyaPanduan berikutnya
Generasi Musik Simbolik
AI Audio
PANDUAN Audio AI
Transkripsi Musik Otomatis (AMT) mengubah rekaman audio mentah musik menjadi notasi simbolis seperti lembaran musik, MIDI, atau piano roll.
Dengarkan panduan iniDiceritakan oleh AI · ~2 min
Permainan ini menangani salah satu masalah tersulit dalam AI audio: mengurai banyak nada yang saling tumpang tindih yang dimainkan sekaligus.
Sistem AMT mendengarkan bentuk gelombang audio dan keluaran notasi mana yang dimainkan, kapan dimulai, berapa lama not tersebut bertahan, dan terkadang instrumen mana yang memainkannya. Tantangan utamanya adalah polifoni: ketika beberapa nada dibunyikan secara bersamaan, harmoniknya tumpang tindih dan kabur dalam spektrum frekuensi, sehingga satu nada C dan G sulit dipisahkan dari satu nada yang lebih keras. Sistem modern mengubah audio menjadi representasi frekuensi waktu seperti mel-spektogram atau Constant-Q Transform, kemudian menggunakan jaringan saraf dalam untuk memprediksi permulaan nada, offset, dan nada. Model Onsets and Frames Google merupakan tonggak penting dalam transkripsi piano, sementara model transformator yang lebih baru seperti MT3 mentranskripsikan beberapa instrumen sekaligus.
AnthemScore dan aplikasi serupa mengubah rekaman MP3 menjadi lembaran musik yang dapat diedit untuk musisi yang mempelajari lagu secara langsung
Ekstraksi MIDI dari rekaman piano sehingga produser dapat menyuarakan ulang atau mengkuantisasi performa dalam DAW
Alat pendidikan musik yang membandingkan not yang dimainkan siswa dengan skor untuk menandai not yang salah atau terlewat
Ahli musik menyalin rekaman sejarah atau improvisasi (seperti solo jazz) ke dalam notasi untuk dianalisis
AMT beralih dari piano solo ke arah transkripsi multi-instrumen dan full-band yang andal, termasuk drum, vokal, dan teknik ekspresif seperti tikungan dan vibrato. Arsitektur transformator yang dilatih pada kumpulan data sintetik dan selaras yang besar akan menutup kesenjangan tersebut. Harapkan integrasi yang lebih erat dengan pemisahan sumber, transkripsi real-time untuk pertunjukan langsung, dan alat yang menangkap waktu mikro dan dinamika, bukan hanya catatan. Tujuan jangka panjangnya adalah sebuah sistem yang mengubah rekaman apa pun menjadi skor yang dapat diedit dan dibaca manusia.
Buletin gratis
Tiga cerita AI terverifikasi setiap pagi hari kerja, ditulis dalam bahasa Inggris sederhana. Gratis selamanya, tanpa iklan.
Satu email setiap hari kerja. Berhenti berlangganan dalam satu klik. Kami tidak pernah menjual atau membagikan alamat Anda.
Uji diri Anda sendiri
Umpan balik instan untuk setiap jawaban, dan sertifikat yang dapat dibagikan dengan ID yang dapat diverifikasi setelah Anda lulus kursus.
Mendukung pendidikan AI gratis. AI Understanding adalah organisasi nirlaba 501(c)(3) — tanpa iklan, tanpa paywall, selamanya. Berikan sumbangan
Transkripsi Musik Otomatis (AMT) mengubah rekaman audio mentah musik menjadi notasi simbolis seperti lembaran musik, MIDI, atau piano roll. Ini mengatasi salah satu masalah tersulit dalam audio AI: menguraikan banyak not yang tumpang tindih yang dimainkan sekaligus.
AMT mengubah rekaman audio menjadi notasi simbolik seperti MIDI, piano roll, atau lembaran musik yang menjelaskan notasi yang dimainkan.
Jika beberapa nada dibunyikan secara bersamaan, harmoniknya akan tumpang tindih, sehingga sulit untuk memisahkan nada-nada mana yang ada.
Onset dan Frame menggunakan satu kepala untuk mendeteksi permulaan nada yang tepat dan satu lagi untuk nada yang berkelanjutan, dengan permulaan yang mengatur keluaran bingkai.
Nada musik diberi jarak secara logaritmik (frekuensi oktaf dua kali lipat), dan wadah dengan jarak log CQT sejajar secara alami dengan ini.
Permulaan adalah momen yang tajam dan energik ketika sebuah nada dimulai, yang lebih mudah dilokalisasi secara tepat daripada mempertahankannya.
Teruslah belajar
Panduan lainnya dipilih untuk topik ini
SelanjutnyaPanduan berikutnya
Generasi Musik Simbolik
AI Audio