SıradakiSonraki rehber
Sembolik Müzik Üretimi
Ses Yapay Zekası
Ses AI KILAVUZU
Otomatik Müzik Transkripsiyonu (AMT), müziğin ham ses kaydını notalar, MIDI veya piyano rulosu gibi sembolik bir gösterime dönüştürür.
Bu kılavuzu dinleyinAI tarafından anlatılan · ~2 min
Sesli yapay zekadaki en zor sorunlardan birini ele alıyor: aynı anda çalınan birçok üst üste binen notayı çözmek.
AMT sistemleri bir ses dalga biçimini dinler ve hangi notaların çalındığını, ne zaman başladıklarını, ne kadar sürdüğünü ve bazen bunları hangi enstrümanın çaldığını verir. Temel zorluk polifonidir: Birkaç nota aynı anda çaldığında, bunların harmonikleri frekans spektrumunda örtüşür ve birlikte bulanıklaşır, böylece tek bir C ve G'yi daha yüksek sesli tek bir notadan ayırmak zor olabilir. Modern sistemler, sesi bir mel-spektrogram veya Constant-Q Dönüşümü gibi bir zaman-frekans temsiline dönüştürür, ardından nota başlangıçlarını, ofsetlerini ve perdelerini tahmin etmek için derin sinir ağlarını kullanır. Google'nin Onsets and Frames modeli piyano transkripsiyonunda bir dönüm noktası olurken, MT3 gibi daha yeni transformatör modelleri aynı anda birden fazla enstrümanı transkripsiyona uğratıyor.
Şarkıları kulaktan öğrenen müzisyenler için MP3 kayıtlarını düzenlenebilir notalara dönüştüren AnthemScore ve benzeri uygulamalar
Bir yapımcının bir DAW'daki performansı yeniden seslendirebilmesi veya niceleyebilmesi için bir piyano kaydından MIDI çıkarma
Yanlış veya eksik notaları işaretlemek için öğrencinin çaldığı notaları puanla karşılaştıran müzik eğitimi araçları
Tarihsel veya doğaçlama kayıtları (caz soloları gibi) analiz için notasyona dönüştüren müzikologlar
AMT, solo piyanodan davullar, vokaller ve vibrato ve vibrato gibi etkileyici teknikler dahil olmak üzere güvenilir çoklu enstrüman ve tam bant transkripsiyona doğru ilerliyor. Büyük sentetik ve hizalanmış veri kümeleri üzerinde eğitilmiş transformatör mimarileri açığı kapatıyor. Kaynak ayırma, canlı performans için gerçek zamanlı transkripsiyon ve yalnızca notaları değil, mikro zamanlamayı ve dinamikleri de yakalayan araçlarla daha sıkı entegrasyon bekleyebilirsiniz. Uzun vadeli hedef, herhangi bir kaydı düzenlenebilir, insan tarafından okunabilir bir notaya dönüştüren bir sistemdir.
Ücretsiz bülten
Hafta içi her sabah sade İngilizce yazılmış, doğrulanmış üç yapay zeka hikayesi. Sonsuza kadar ücretsiz, reklam yok.
Hafta içi her gün bir e-posta. Tek tıklamayla aboneliğinizi iptal edin. Adresinizi asla satmayız veya paylaşmayız.
Kendinizi test edin
Her yanıtla ilgili anında geri bildirim ve bir kursu geçtiğinizde doğrulanabilir bir kimliğe sahip paylaşılabilir bir sertifika.
Ücretsiz AI eğitimini destekleyin. AI Understanding, bir 501(c)(3) kâr amacı gütmeyen kuruluştur; hiçbir zaman reklam yoktur, ödeme duvarı yoktur. Bağış yap
Otomatik Müzik Transkripsiyonu (AMT), müziğin ham ses kaydını notalar, MIDI veya piyano rulosu gibi sembolik bir gösterime dönüştürür. Ses yapay zekasındaki en zor sorunlardan birinin üstesinden geliyor: aynı anda çalınan birçok üst üste binen notanın çözülmesi.
AMT, bir ses kaydını MIDI, piyano rulosu veya çalınan notaları açıklayan notalar gibi sembolik bir gösterime dönüştürür.
Birden fazla nota aynı anda çaldığında, harmonikleri örtüşür, bu da hangi perdelerin mevcut olduğunu ayırmayı zorlaştırır.
Başlangıçlar ve Kareler, hassas nota başlangıçlarını tespit etmek için bir kafa ve başlangıçların kare çıktısını kontrol ettiği sürekli perdeler için başka bir kafa kullandı.
Müzik perdeleri logaritmik olarak aralıklıdır (oktav frekansı iki kattır) ve CQT'nin log aralıklı bölmeleri bununla doğal olarak hizalanır.
Başlangıç, bir notanın başladığı keskin, enerjik andır ve bunun yerini tam olarak belirlemek, sürdürülmesinden daha kolaydır.
Öğrenmeye devam et
Bu konu için daha fazla rehber seçildi
SıradakiSonraki rehber
Sembolik Müzik Üretimi
Ses Yapay Zekası