SeterusnyaPanduan seterusnya
Penjanaan Muzik Simbolik
AI Audio
PANDUAN AI Audio
Transkripsi Muzik Automatik
Transkripsi Muzik Automatik (AMT) menukarkan rakaman audio mentah muzik kepada notasi simbolik seperti muzik helaian, MIDI atau gulungan piano.
Dengar panduan iniAI-diceritakan · ~2 min
Pada halaman ini2 min dibaca
Gambaran keseluruhan
Ia menangani salah satu masalah paling sukar dalam AI audio: menguraikan banyak nota bertindih yang dimainkan serentak.
Menyelam dalam
Sistem AMT mendengar bentuk gelombang audio dan mengeluarkan nota yang dimainkan, bila ia bermula, berapa lama ia bertahan, dan kadangkala instrumen yang memainkannya. Cabaran teras ialah polifoni: apabila beberapa not berbunyi serentak, harmoniknya bertindih dan kabur bersama-sama dalam spektrum frekuensi, jadi satu C dan G sukar dipisahkan daripada satu not yang lebih kuat. Sistem moden menukar audio kepada perwakilan frekuensi masa seperti mel-spectrogram atau Constant-Q Transform, kemudian menggunakan rangkaian saraf dalam untuk meramalkan permulaan nota, offset dan pic. Model Permulaan dan Bingkai Google merupakan mercu tanda untuk transkripsi piano, manakala model pengubah baharu seperti MT3 menyalin berbilang instrumen sekaligus.
Pelaksanaan Dunia Sebenar
AnthemScore dan apl serupa yang menukarkan rakaman MP3 kepada helaian muzik yang boleh diedit untuk pemuzik yang mempelajari lagu melalui telinga
Pengekstrakan MIDI daripada rakaman piano supaya penerbit boleh menyuarakan semula atau mengukur prestasi dalam DAW
Alat pendidikan muzik yang membandingkan nota yang dimainkan pelajar dengan skor untuk menandakan nota yang salah atau tertinggal
Ahli muzik menyalin rakaman sejarah atau improvisasi (seperti solo jazz) ke dalam notasi untuk analisis
Masa Depan Transkripsi Muzik Automatik
AMT bergerak daripada piano solo ke arah transkripsi berbilang instrumen dan jalur penuh yang boleh dipercayai, termasuk gendang, vokal dan teknik ekspresif seperti selekoh dan vibrato. Seni bina pengubah yang dilatih pada set data sintetik dan sejajar yang besar sedang merapatkan jurang. Jangkakan penyepaduan yang lebih ketat dengan pemisahan sumber, transkripsi masa nyata untuk prestasi langsung dan alatan yang menangkap masa dan dinamik mikro, bukan hanya nota. Matlamat jangka panjang ialah sistem yang mengubah sebarang rakaman menjadi skor yang boleh diedit dan boleh dibaca manusia.
Mempraktikkannya
Mengapa ia penting
- Akses dan capai. Ia meningkatkan kebolehcapaian melalui transkripsi, narasi dan antara muka suara.
- Kos dan bajet. Pasukan media boleh menghantar audio yang digilap dengan lebih pantas dengan belanjawan yang lebih kecil.
- Kelajuan dan skala. Sistem yang menghadapi pelanggan boleh memproses interaksi pertuturan pada skala yang lebih besar.
Berhati-hati untuk
- Penyalahgunaan suara dan risiko penyamaran meningkat apabila tiada kebenaran.
- Ketepatan boleh menurun merentas aksen, dialek atau persekitaran yang bising.
- Audio sintetik boleh disalah anggap sebagai pertuturan tulen tanpa pelabelan yang jelas.
Langkah seterusnya
- Dapatkan persetujuan yang jelas untuk menangkap suara, pengklonan dan penggunaan semula.
- Uji kualiti merentas pelbagai pembesar suara dan keadaan latar belakang.
- Tentukan bila manusia mesti menyemak atau meluluskan output.
- Labelkan audio sintetik dan simpan rekod asal untuk kebertanggungjawaban.
Teruskan Meneroka
Newsletter percuma
Dapatkan taklimat AI harian
Tiga cerita AI yang disahkan setiap pagi hari bekerja, ditulis dalam Bahasa Inggeris biasa. Percuma selamanya, tiada iklan.
Satu e-mel setiap hari bekerja. Berhenti melanggan dalam satu klik. Kami tidak pernah menjual atau berkongsi alamat anda.
Uji diri anda
Take the Automatic Music Transcription quiz
Maklum balas segera pada setiap jawapan, dan sijil yang boleh dikongsi dengan ID yang boleh disahkan sebaik sahaja anda lulus kursus.
Sokong pendidikan AI percuma. AI Understanding ialah pertubuhan bukan keuntungan 501(c)(3) — tiada iklan, tiada bayaran dinding, selamanya. Buat derma
Soalan lazim
Apakah Transkripsi Muzik Automatik?
Transkripsi Muzik Automatik (AMT) menukarkan rakaman audio mentah muzik kepada notasi simbolik seperti muzik helaian, MIDI atau gulungan piano. Ia menangani salah satu masalah paling sukar dalam AI audio: menguraikan banyak nota bertindih yang dimainkan serentak.
Apakah yang dihasilkan oleh Transkripsi Muzik Automatik?
AMT menukarkan rakaman audio kepada tatatanda simbolik seperti MIDI, gulung piano atau lembaran muzik yang menerangkan nota yang dimainkan.
Mengapakah muzik polifonik amat sukar untuk ditranskripsikan?
Apabila berbilang not berbunyi serentak harmoniknya bertindih, menjadikannya sukar untuk memisahkan pic individu mana yang hadir.
Apakah yang ketara tentang model Onset dan Bingkai Google?
Permulaan dan Bingkai menggunakan satu kepala untuk mengesan permulaan nota yang tepat dan satu lagi untuk nada yang berterusan, dengan permulaan mengawal output bingkai.
Mengapa Constant-Q Transform berguna untuk muzik?
Pic muzik dijarakkan secara logaritma (oktaf dua kali ganda dalam kekerapan), dan tong sampah log CQT sejajar secara semula jadi dengan ini.
Apakah yang dimaksudkan dengan 'permulaan' dalam transkripsi?
Permulaan ialah detik yang tajam dan bertenaga apabila nota bermula, yang lebih mudah untuk disetempatkan dengan tepat daripada pengekalannya.
Teruskan belajar
Panduan berkaitan
Lebih banyak panduan dipilih untuk topik ini