التاليالدليل التالي
وضع العلامات على الموسيقى مع المحولات
الذكاء الاصطناعي الصوتي
دليل الصوت AI
يتنبأ وضع العلامات التلقائي للموسيقى بتسميات وصفية مثل النوع، المزاج، والآلات من الصوت.
استمع إلى هذا الدليلرواه الذكاء الاصطناعي · ~2 min
يمكنه دعم البحث في الكتالوج، التوصية، والتنظيم، لكن توقعاته تعتمد على التسميات المتاحة وبيانات التدريب.
يتعامل وضع العلامات التلقائي على الموسيقى مع التصنيف باعتباره مشكلة تصنيف متعددة التصنيفات: يمكن أن يكون المسار الفردي "موسيقى الروك" و"الحيوي" و"يحركه الجيتار" في وقت واحد. تقوم الأنظمة الحديثة بتحويل الصوت الخام إلى مخطط طيفي ميل (صورة تردد زمني للصوت) وتغذيته من خلال شبكة عصبية تلافيفية أو قائمة على المحولات مدربة على مجموعات البيانات مثل MagnaTagATune، أو مجموعة بيانات المليون أغنية، أو MTG-Jamendo. يقوم النموذج بإخراج احتمالية لكل علامة محتملة. نظرًا لأن العلامات التي يطبقها الإنسان صاخبة وغير مكتملة، فإن التدريب يمثل تحديًا، كما أن التسميات غير متوازنة. يأتي العمود الفقري نفسه بشكل متزايد من النماذج الصوتية ذاتية الإشراف، لذا فإن التمثيل الفردي يغذي العلامات والتوصية والبحث عن التشابه بدلاً من بناء نموذج منفصل لكل علامة.
تقوم Spotify والخدمات المشابهة بوضع علامات على التحميلات الجديدة حسب النوع والحالة المزاجية لتشغيل توصيات نمط "Discover Weekly".
مكتبات إنتاج الموسيقى التي تسمح لمحرري الفيديو بتصفية الملايين من مسارات المخزون من خلال "رفع مستوى الشركة" أو "السينما المتوترة"
يقوم برنامج DJ بالكشف التلقائي عن BPM والمفتاح والطاقة بحيث يمكن فرز المسارات ومطابقتها تلقائيًا
تقوم منصات ترخيص الموسيقى بوضع علامات على الآلات الموسيقية والمزاج لمطابقة الأغاني مع ملخصات الإعلانات
نماذج الصوت-اللغة مثل CLAP تربط الصوت بتمثيلات النص، مما يسمح بالاسترجاع الحر إلى جانب وضع العلامات الثابتة. تستكشف الأبحاث أيضًا تغطية أوسع للأنواع، التسمية التوضيحية، ونماذج أكثر كفاءة. لا تزال هذه الأساليب تحتاج إلى تقييم على الكتالوج المقصود: مطابقة الاستعلام النصي ليست دليلًا على أوصاف شاملة أو موضوعية، خاصةً للمزاجات والأنماط الذاتية.
رسالة إخبارية مجانية
ثلاث قصص تم التحقق منها بواسطة الذكاء الاصطناعي كل صباح من أيام الأسبوع، مكتوبة باللغة الإنجليزية البسيطة. مجاني للأبد، بدون إعلانات.
بريد إلكتروني واحد كل يوم من أيام الأسبوع. إلغاء الاشتراك بنقرة واحدة. نحن لا نبيع أو نشارك عنوانك أبدًا.
اختبر نفسك
تعليقات فورية على كل إجابة، وشهادة قابلة للمشاركة مع معرف يمكن التحقق منه بمجرد اجتياز الدورة التدريبية.
دعم تعليم الذكاء الاصطناعي المجاني. AI Understanding هي منظمة 501(c)(3) غير ربحية - لا إعلانات ولا نظام حظر الاشتراك غير المدفوع على الإطلاق. قم بالتبرع
يتنبأ وضع العلامات التلقائي للموسيقى بتسميات وصفية مثل النوع، المزاج، والآلات من الصوت. يمكنه دعم البحث في الكتالوج، التوصية، والتنظيم، لكن توقعاته تعتمد على التسميات المتاحة وبيانات التدريب.
يمكن للمسار أن يكون موجهًا للجيتار ومفعمًا بالطاقة في آنٍ واحد. تسمح المخرجات المنفصلة بوجود عدة تسميات نشطة دون الادعاء بأن الخصائص مستقلة إحصائيًا.
عادةً ما يتم تحويل الصوت إلى مخطط طيفي ميل، وهو صورة ذات تردد زمني يمكن لشبكة CNN معالجتها مثل الصورة الفوتوغرافية.
يباعد مقياس ميل الترددات لتتناسب مع إدراك طبقة الصوت البشرية، مما يعطي دقة أكبر للترددات المنخفضة التي تهتم بها آذاننا كثيرًا.
العلامات التي يتم الحصول عليها من الحشود غير متسقة والعديد من العلامات الصالحة مفقودة ببساطة، وتظهر بعض العلامات في كثير من الأحيان أكثر من غيرها، مما يجعل التعلم أكثر صعوبة.
يعد MagnaTagATune، جنبًا إلى جنب مع Million Song Dataset وMTG-Jamendo، معيارًا قياسيًا لوضع علامات على الموسيقى. ImageNet مخصص للصور، وSQuAD مخصص للنص QA، وLibriSpeech مخصص للكلام.
استمر في التعلم
تم اختيار المزيد من الأدلة لهذا الموضوع
التاليالدليل التالي
وضع العلامات على الموسيقى مع المحولات
الذكاء الاصطناعي الصوتي