የድምጽ AI መመሪያ

DDSP የሚለያይ የድምጽ ውህደት

DDSP (የተለያዩ የዲጂታል ሲግናል ፕሮሰሲንግ) ክላሲክ ሲንተዘርዘር ህንጻ ብሎኮችን ከነርቭ ኔትወርኮች ጋር ያዋህዳል፣ ስለዚህ ጥልቅ ትምህርት ኦስሲሊተሮችን እና ማጣሪያዎችን በቀጥታ ይቆጣጠራል።

2 ሚን አንብብለመጨረሻ ጊዜ የዘመነው

አጠቃላይ እይታ

በጥቃቅን ሞዴሎች እና በትንሽ መረጃ በሚያስደንቅ ሁኔታ ተፈጥሯዊ፣ ቁጥጥር የሚደረግባቸው የመሳሪያ ድምፆችን ያመነጫል።

ጥልቅ ዳይቭ

DDSP፣ በ2020 በGoogle የMagenta ቡድን አስተዋወቀ፣ የነርቭ ኦዲዮ ማመንጨትን እንደገና ያስባል። አውታረ መረብ ጥሬ የድምጽ ናሙናዎችን አንድ በአንድ (እንደ WaveNet) ወይም የስፔክትሮግራም ፒክስሎች ከመተንበይ ይልቅ፣ DDSP ባህላዊ የዲኤስፒ ክፍሎችን - ሃርሞኒክ ተጨማሪ ማወዛወዝ፣ የተጣራ የድምጽ ማመንጫ እና ሬቨርብ - ይለያል። ይህ ማለት በስልጠና ወቅት ቅልጥፍናዎች በእነሱ ውስጥ ሊፈስሱ ይችላሉ ፣ ስለሆነም ትንሽ የነርቭ አውታረ መረብ ሊተረጎሙ የሚችሉ የቁጥጥር ምልክቶችን ማውጣት ይማራል-መሰረታዊ ድምጽ ፣ አጠቃላይ ድምጽ እና በደርዘን የሚቆጠሩ harmonics በጊዜ ሂደት። አንድ ሲንተዘርዘር ትክክለኛውን ድምጽ ከእነዚህ መቆጣጠሪያዎች ያቀርባል። የድምፅ ፊዚክስ ከባዶ ከመማር ይልቅ በሥነ ሕንፃ ውስጥ የተጋገረ ስለሆነ፣ DDSP እጅግ በጣም አነስተኛ በሆኑ መለኪያዎች እና የሥልጠና ምሳሌዎች ከፍተኛ ጥራትን ያገኛል፣ እና ተጠቃሚዎች በተናጥል ድምጽን፣ ጩኸትን እና ግንብን እንዲቆጣጠሩ ያስችላቸዋል - ሌላው ቀርቶ የዘፈን ድምጽ እንደ ቫዮሊን እንዲጫወት ማድረግ የቲምበር ማስተላለፍን እንኳን ማከናወን።

ቴክኒካዊ ግንዛቤ

ዋናው ስፔክትራል ሞዴሊንግ ሲንቴዘርዘር ነው፡ ሃርሞኒክ ኦስሲሊሌተር ባንክ የሳይን ሞገዶች ድምር ሲን ሞገዶችን በመሰረታዊ ድግግሞሽ ኢንቲጀር ብዜቶች ያመነጫል፣ የተለየ መንገድ ደግሞ ነጭ ድምጽን ለአተነፋፈስ እና የማይጎዳ ሸካራነት ያጣራል። የነርቭ አውታረመረብ በጭራሽ ድምጽን በቀጥታ አያወጣም - ጊዜ-ተለዋዋጭ የቁጥጥር መለኪያዎችን (f0 ፣ ከፍተኛ ድምጽ ፣ ሃርሞኒክ ስርጭት ፣ የማጣሪያ ኮፊሸን) ያወጣል። ስልጠና በበርካታ የኤፍኤፍቲ የመስኮት መጠኖች ውስጥ የመነጨውን እና የታለመውን ኦዲዮን በማነፃፀር ባለብዙ-ልኬት ስፔክትሮግራም ኪሳራ ይጠቀማል ፣ ይህም እስከ ምዕራፍ ልዩነቶች ድረስ ጠንካራ ነው።

ስልታዊ ተጽእኖ

መድረስ እና መድረስ

በጽሑፍ፣ በትረካ እና በድምፅ በይነገጾች ተደራሽነትን ያሻሽላል።

ወጪ እና በጀት

የሚዲያ ቡድኖች በትንሽ በጀቶች የተጣራ ድምጽ በፍጥነት መላክ ይችላሉ።

ፍጥነት እና ልኬት

ከደንበኛ ጋር የሚገናኙ ስርዓቶች የንግግር ግንኙነቶችን በትልቁ ደረጃ ማካሄድ ይችላሉ።

የ DDSP የሚለየው የድምጽ ውህደት የወደፊት

DDSP በአሳሽ ውስጥ እና በተካተቱ መሳሪያዎች ላይ ጨምሮ በመጠኑ ሃርድዌር ላይ የሚሰሩ የእውነተኛ ጊዜ፣ ዝቅተኛ መዘግየት የነርቭ መሳሪያዎችን እና የድምጽ ተፅእኖዎችን እየገፋ ነው። የእሱ ሊተረጎም የሚችል ቁጥጥሮች ሙዚቀኞች ቲምበርን በቀጥታ ለሚደውሉበት ገላጭ የአፈፃፀም መሳሪያዎች እና ድብልቅ ማጠናከሪያዎች ተስማሚ ያደርገዋል። ተመራማሪዎች የሚለየውን-DSP ሃሳብ ወደ አካላዊ ሞዴሊንግ፣ ክፍል አኮስቲክስ እና ሙሉ የኦዲዮ ፕሮዳክሽን ሰንሰለቶች በማስፋፋት የጥንታዊ ሲግናል ሂደትን መቆጣጠር እና በሙዚቃ ፈጠራ እና በድምጽ ዲዛይን ላይ ካለው ጥልቅ ትምህርት እውነታ ጋር በማጣመር ነው።

የእውነተኛ-ዓለም አተገባበር

የቲምበሬ ማስተላለፊያ መሳሪያዎች ሃምድ ወይም ዘማሪ ዜማ ወስደው እንደ ቫዮሊን፣ ዋሽንት ወይም መለከትን በቅጽበት የሚያሳዩት።

ሙዚቀኞች የሚቆጣጠራቸው ቀላል ክብደት ያለው የነርቭ ማሰራጫ ተሰኪዎች በድምቀት፣ በድምፅ እና በብሩህነት ቁልፎች።

የተፈጥሮ ሃርሞኒክ ዝርዝሮችን በመጠበቅ የተቀዳውን መሳሪያዎች እርማት እና ገላጭ መልሶ ማቋቋም።

ያለ ከባድ የጂፒዩ ሞዴሎች ተጨባጭ የመሳሪያ ድምጾችን የሚያመነጩ አሳሽ ላይ የተመሰረቱ በይነተገናኝ የሙዚቃ ማሳያዎች።

አደጋዎች እና የጥበቃ መንገዶች

ስምምነት ሲጠፋ የድምፅ አላግባብ መጠቀም እና የማስመሰል አደጋዎች ይጨምራሉ።

ትክክለኛነት በአነጋገር ዘዬዎች፣ ቀበሌኛዎች ወይም ጫጫታ አካባቢዎች ላይ ሊወድቅ ይችላል።

ሰራሽ ኦዲዮ ግልጽ ምልክት ሳይደረግበት ለትክክለኛ ንግግር ሊሳሳት ይችላል።

የትግበራ ፍኖተ ካርታ

1

ለድምጽ ቀረጻ፣ ክሎኒንግ እና እንደገና ጥቅም ላይ ለማዋል ግልጽ የሆነ ፈቃድ ያግኙ።

2

በተለያዩ የድምጽ ማጉያዎች እና የበስተጀርባ ሁኔታዎች ላይ ጥራትን ይሞክሩ።

3

አንድ ሰው መቼ ውጤቶችን መገምገም ወይም ማጽደቅ እንዳለበት ይግለጹ።

4

ሰው ሰራሽ ኦዲዮን ይሰይሙ እና ለተጠያቂነት የፕሮቨንስ መዝገቦችን ያስቀምጡ።

ማሰስዎን ይቀጥሉ

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the DDSP Differentiable Audio Synthesis quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

ጥያቄ ጀምር

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

ቀጣይ መመሪያ

AudioGen ጽሑፍ-ወደ-ድምጽ ውህደት

በተደጋጋሚ የሚጠየቁ ጥያቄዎች

DDSP ሊለያይ የሚችል የድምጽ ውህደት ምንድን ነው?

DDSP (የተለያዩ የዲጂታል ሲግናል ፕሮሰሲንግ) ክላሲክ ሲንተዘርዘር ህንጻ ብሎኮችን ከነርቭ ኔትወርኮች ጋር ያዋህዳል፣ ስለዚህ ጥልቅ ትምህርት ኦስሲሊተሮችን እና ማጣሪያዎችን በቀጥታ ይቆጣጠራል። በጥቃቅን ሞዴሎች እና በትንሽ መረጃ በሚያስደንቅ ሁኔታ ተፈጥሯዊ፣ ቁጥጥር የሚደረግባቸው የመሳሪያ ድምጾችን ያመነጫል።

ከዲዲኤስፒ በስተጀርባ ያለው ቁልፍ ፈጠራ ምንድን ነው?

DDSP ባህላዊ የአቀነባባሪ ግንባታ ብሎኮችን ወደ ተለያዩ ሞጁሎች ይቀይራቸዋል፣ ይህም የነርቭ አውታረ መረብ በኋለኛ ፕሮፓጋንዳ ለመቆጣጠር እንዲማር ያስችለዋል።

በዲዲኤስፒ ውስጥ፣ የነርቭ አውታረመረብ በእውነቱ ምን ያስወጣል?

አውታረ መረቡ የጊዜ-ተለዋዋጭ የቁጥጥር መለኪያዎችን ይተነብያል፣ እና የተለየ ልዩነት ያለው አቀናባሪ ድምጹን ከነሱ ያቀርባል - ናሙናዎችን በቀጥታ አያወጣም።

የዲዲኤስፒ ስፔክትራል ሲንተራይዘር የትኞቹን ሁለት ዋና ድምጽ-አመንጭ አካላት ያዋህዳል?

አንድ harmonic additive oscillator የተቀረጸውን፣ እርስ በርሱ የሚስማማውን ክፍል ያመነጫል፣ የተጣራ ድምፅ ደግሞ እስትንፋስን እና የማይጎዳውን ሸካራነት ይጨምራል።

ለምንድነው DDSP በአንፃራዊ ትናንሽ ሞዴሎች እና አነስተኛ መረጃዎች ከፍተኛ ጥራት ያለው?

የሚታወቀው የሲግናል ማቀናበሪያ መዋቅር የተገነባው ከባዶ ከመማር ይልቅ፣ አውታረ መረቡ ለመማር በጣም ትንሽ ነው፣ መረጃን እና የመለኪያ ቅልጥፍናን ያሻሽላል።

የመነጨውን እና ኦዲዮን በጠንካራ መልኩ ለማነጣጠር DDSP ምን የኪሳራ ተግባር ይጠቀማል?

የመጠን ስፔክትሮግራሞችን በበርካታ ጥራቶች ማወዳደር ከደረጃ ልዩነቶች ጋር ጠንካራ ነው፣ ይህም የናሙና ደረጃ ኪሳራዎች ይታገላሉ።