คู่มือเสียง AI

การแยกเพลงแบบเปิด-Unmix

Open-Unmix (UMX) คือระบบการเรียนรู้เชิงลึกแบบโอเพ่นซอร์สที่แบ่งเพลงออกเป็นส่วนต่างๆ เช่น เสียงร้อง กลอง เบส และเครื่องดนตรีอื่นๆ

ฟังคำแนะนำนี้บรรยายโดย AI · ~2 min

บนหน้านี้อ่าน 2 นาที
  1. ภาพรวม
  2. เจาะลึก
  3. การใช้งานจริงในโลกแห่งความเป็นจริง
  4. อนาคตของการแยกเพลงแบบ Open-Unmix
  5. การนำไปปฏิบัติ
  6. สำรวจต่อไป
  7. คำถามที่พบบ่อย

ภาพรวม

สิ่งสำคัญคือเป็นพื้นฐานคุณภาพอ้างอิงที่สามารถทำซ้ำได้ ซึ่งทำให้นักวิจัย นักดนตรี และมือสมัครเล่นสามารถเข้าถึงการแยกแหล่งที่มาของเพลงได้

เจาะลึก

Open-Unmix (UMX) เป็นการใช้งานอ้างอิงแบบเปิดสำหรับการแยกแหล่งเพลง มีโมเดลสำหรับเสียงร้อง กลอง เบส และเครื่องดนตรีอื่นๆ พร้อมระบบอ้างอิงที่ฝึกฝนบน MUSDB18 การออกแบบให้ความชัดเจนและความสามารถในการทำซ้ำเป็นพื้นฐานสำหรับการวิจัย ในแบบจำลองสเปกโตรแกรมหลัก เครือข่ายเฉพาะเป้าหมายจะคาดการณ์มาสก์สำหรับขนาดของส่วนผสม การสร้างใหม่ใช้เฟสผสม และตัวกรอง Wiener แบบหลายช่องสามารถเลือกปรับแต่งลำต้นโดยประมาณได้ ตัวแปรของโครงการปัจจุบันอาจแตกต่างกันในข้อมูลการฝึกอบรมและอินเทอร์เฟซอินพุต/เอาท์พุต ดังนั้นการอ้างสิทธิ์ที่นี่จึงอ้างอิงถึงแนวทางการอ้างอิงดั้งเดิม

การใช้งานจริงในโลกแห่งความเป็นจริง

แยกแทร็กเสียงที่แยกออกมาเพื่อสร้างเพลงคาราโอเกะหรือเพลงบรรเลง

ดึงก้านกลองหรือเบสออกมาเพื่อรีมิกซ์และสุ่มตัวอย่างโดยผู้ผลิต

ทำหน้าที่เป็นพื้นฐานการวิจัยที่สามารถทำซ้ำได้สำหรับการประเมินแบบจำลองการแยกใหม่บน MUSDB18

ให้นักเรียนดนตรีแยกเครื่องดนตรีหนึ่งชิ้นเพื่อศึกษาส่วนของเครื่องดนตรีนั้นในการมิกซ์

อนาคตของการแยกเพลงแบบ Open-Unmix

Open-Unmix แซงหน้าในด้านคุณภาพดิบโดยแบบจำลองรูปคลื่น เช่น Demucs และระบบรูปคลื่นแบบสเปกโตรแกรมแบบไฮบริด แต่บทบาทของมันเป็นข้อมูลอ้างอิงที่ชัดเจนและสามารถแฮ็กได้ ทำให้มีความเกี่ยวข้องสำหรับการสอนและการสร้างต้นแบบอย่างรวดเร็ว คาดว่าจะมีการใช้งานอย่างต่อเนื่องในด้านการศึกษาและเป็นพื้นฐานการตรวจสอบสติ ในขณะที่สาขาที่กว้างขึ้นจะเคลื่อนไปสู่ตัวแยกที่ใช้หม้อแปลงและไฮบริดที่มีความเที่ยงตรงสูงกว่า และไปสู่การแยกหมวดหมู่เครื่องมือที่มีความละเอียดมากขึ้น

การนำไปปฏิบัติ

ทำไมมันถึงสำคัญ

  • เข้าถึงและเข้าถึง. ปรับปรุงการเข้าถึงผ่านการถอดเสียง คำบรรยาย และอินเทอร์เฟซเสียง
  • ต้นทุนและงบประมาณ. ทีมสื่อสามารถจัดส่งเสียงที่สวยงามได้รวดเร็วยิ่งขึ้นด้วยงบประมาณที่น้อยลง
  • ความเร็วและขนาด. ระบบที่ติดต่อกับลูกค้าสามารถประมวลผลการโต้ตอบด้วยเสียงในขนาดที่ใหญ่ขึ้น

ระวัง

  • การใช้เสียงในทางที่ผิดและการแอบอ้างบุคคลอื่นมีความเสี่ยงเพิ่มขึ้นเมื่อขาดความยินยอม
  • ความแม่นยำอาจลดลงตามสำเนียง ภาษาถิ่น หรือสภาพแวดล้อมที่มีเสียงดัง
  • เสียงสังเคราะห์อาจถูกเข้าใจผิดว่าเป็นเสียงพูดที่แท้จริงโดยไม่มีการกำกับที่ชัดเจน

ขั้นตอนต่อไป

  1. ได้รับความยินยอมอย่างชัดแจ้งสำหรับการจับเสียง การโคลน และการใช้ซ้ำ
  2. ทดสอบคุณภาพกับลำโพงและสภาพพื้นหลังที่หลากหลาย
  3. กำหนดเวลาที่มนุษย์จะต้องตรวจสอบหรืออนุมัติผลลัพธ์
  4. ติดป้ายกำกับเสียงสังเคราะห์และเก็บบันทึกที่มาเพื่อความรับผิดชอบ

สำรวจต่อไป

จดหมายข่าวฟรี

รับสรุป AI รายวัน

เรื่องราว AI ที่ตรวจสอบแล้ว 3 เรื่องทุกวันทำงาน เช้า, เขียนเป็นภาษาอังกฤษธรรมดา ฟรีตลอดไป ไม่มีโฆษณา

อีเมลหนึ่งฉบับทุกวันทำงาน ยกเลิกการสมัครในคลิกเดียว เราไม่เคยขายหรือแชร์ที่อยู่อีเมลของคุณ

ทดสอบตัวเอง

ทำแบบทดสอบการแยกเพลงแบบ Open-Unmix

ข้อเสนอแนะทันทีสำหรับทุกคำตอบ และใบรับรองที่สามารถแชร์ได้พร้อม ID ที่ตรวจสอบได้เมื่อคุณผ่านหลักสูตร

เริ่มแบบทดสอบ

สนับสนุนการศึกษา AI ฟรี AI Understanding เป็นองค์กรไม่แสวงหาผลกำไร 501(c)(3) — ไม่มีโฆษณา ไม่มีกำแพงเงิน, ตลอดไป บริจาค

คำถามที่พบบ่อย

การแยกเพลงแบบ Open-Unmix คืออะไร

Open-Unmix (UMX) คือระบบการเรียนรู้เชิงลึกแบบโอเพ่นซอร์สที่แบ่งเพลงออกเป็นส่วนต่างๆ เช่น เสียงร้อง กลอง เบส และเครื่องดนตรีอื่นๆ สิ่งสำคัญคือเป็นพื้นฐานคุณภาพอ้างอิงที่สามารถทำซ้ำได้ ซึ่งทำให้นักวิจัย นักดนตรี และมือสมัครเล่นสามารถเข้าถึงการแยกแหล่งที่มาของเพลงได้

Open-Unmix ทำหน้าที่อะไร?

Open-Unmix คือระบบแยกแหล่งเพลงที่แยกส่วนผสมออกเป็นเครื่องดนตรีและก้านเสียง

โครงข่ายประสาทเทียมใดที่เป็นแกนหลักของ Open-Unmix

Open-Unmix ทำนายสเปกตรัมมาสก์โดยใช้ LSTM แบบสองทิศทางที่ห่อด้วยเลเยอร์ที่เชื่อมต่อกันอย่างสมบูรณ์

Open-Unmix ทำงานบนตัวแทนใด

โดยทำงานบนสเปกโตรแกรมขนาด ทำนายมาสก์ และนำเฟสของส่วนผสมกลับมาใช้ใหม่เพื่อสร้างใหม่

ชุดข้อมูลใดที่ได้รับการฝึกอบรม Open-Unmix

Open-Unmix ใช้ชุดข้อมูลการแยกเพลง MUSDB18 แบบเปิดสำหรับการฝึกอบรมและการประเมินผล

เป้าหมายการออกแบบหลักของ Open-Unmix คืออะไร

มันถูกสร้างขึ้นเพื่อเป็นพื้นฐานที่ชัดเจน มีการจัดทำเอกสารอย่างดี และทำซ้ำได้ แทนที่จะเป็นกล่องดำที่ได้คะแนนสูงสุด

เรียนรู้ต่อไป

คำแนะนำที่เกี่ยวข้อง

คำแนะนำเพิ่มเติมที่เลือกสำหรับหัวข้อนี้

รับใบรับรอง AI ฟรีหลักสูตรและการสอบสั้น ๆ ฟรี ไม่มีค่าใช้จ่าย ไม่มีบัตรเครดิต ประมาณ 2.5 ชั่วโมงเริ่มต้นฟรี →