የድምጽ AI መመሪያ

ምንጭ-አጣራ ቮኮዲንግ እና አለም

ቮኮደር ንግግርን ወደ ግንባታ ብሎኮች ወስዶ መልሶ የሚገነባ መሳሪያ ነው።

አጠቃላይ እይታ

ቮኮደር ንግግርን ወደ ግንባታ ብሎኮች ወስዶ መልሶ የሚገነባ መሳሪያ ነው። የምንጭ ማጣሪያ ሞዴል እና የአለም ድምጽ ማጉያ የድምፅ ገመዶችዎ የሚያደርጉትን ከአፍዎ ቅርጽ በመለየት ከጽሑፍ ወደ ንግግር እና ድምጽ መለወጥን የሚያበረታቱ ጥንታዊ ዘዴዎች ናቸው።

ምንጭ-ማጣሪያ ቮኮዲንግ እና ወርልድ ንግግርን፣ ሙዚቃን እና ድምጽን ለግንኙነት፣ ተደራሽነት እና የሚዲያ ምርት በሚቀይሩ የኦዲዮ-AI የስራ ፍሰቶች ውስጥ ተቀምጧል።

ጥልቅ ዳይቭ

የምንጭ-ማጣሪያው ሞዴል ንግግርን የሚገልጸው እንደ ሁለት ክፍሎች አብረው እንደሚሰሩ ነው፡- ምንጭ (ከእርስዎ የሚርገበገቡ የድምጽ ገመዶች ለድምፅ ድምፆች ወይም ጫጫታ ያለው አየር ሹክሹክታ እና ተነባቢ) በማጣሪያ (የጉሮሮዎ፣ የአፍዎ እና የአፍንጫዎ የሚያስተጋባ ቅርፅ) ያልፋል። አንድ ቮኮደር እነዚህን ቁርጥራጮች ለመገመት የተቀዳውን ድምጽ ይመረምራል ከዚያም አዲስ ኦዲዮን ከነሱ ያዋህዳል። በ2016 አካባቢ በማሳኖሪ ሞሪዝ የተለቀቀው ዓለም ከፍተኛ ጥራት ያለው ቮኮደር ሶስት መለኪያዎችን ያወጣል፡ F0 (የምንጩን የፒች ኮንቱር)፣ ስፔክትራል ኤንቨሎፕ (ማጣሪያው፣ በCheapTrick ስልተ-ቀመር) እና አፒሪዮዲቲ (ምን ያህል ጫጫታ ከድምፅ ጋር፣ በፕላቲNUM/D4C በኩል)። እነዚህ ሶስት ዥረቶች በተናጥል ሊሻሻሉ እና እንደገና ሊዋሃዱ ይችላሉ፣ ይህም አለምን ለፓራሜትሪክ TTS እና ለድምጽ ስርዓቶች የዘፈን የስራ ፈረስ ያደርገዋል።

ቴክኒካዊ ግንዛቤ

የዓለም ኃይል የሚመጣው ከንጹሕ መለያየት ነው። CheapTrick ለትንንሽ የF0 ስህተቶች ጠንካራ የሆነ ለስላሳ ስፔክትራል ኤንቨሎፕ ይገምታል፣ DIO/Harvest track pitch እና D4C ደግሞ የባንድ አፕሪዮዲሲቲን ይለካሉ። ቃና፣ ግንድ እና ጫጫታ በተለያዩ የመለኪያ ዥረቶች ውስጥ ስለሚኖሩ፣ ድምጹ ማን እንደሚመስል ሳይቀይሩ F0ን በአንድ octave ከፍ ማድረግ ወይም ድምጹን ሳይቀይሩ የቆይታ ጊዜን መዘርጋት ይችላሉ። እንደ WaveNet ያሉ የነርቭ ቮኮደሮች በኋላ ላይ የሞገድ ቅርፁን በቀጥታ ቀርፀውታል፣ ነገር ግን አለም ፈጣን፣ የሚተረጎም እና ከፈቃድ ነጻ ሆኖ ይቆያል።

ዋና ምንጭ-አጣራ ድምጽ እና ዓለም

ቮኮደር ንግግርን ወደ ግንባታ ብሎኮች ወስዶ መልሶ የሚገነባ መሳሪያ ነው። የምንጭ ማጣሪያ ሞዴል እና የአለም ድምጽ ማጉያ የድምፅ ገመዶችዎ የሚያደርጉትን ከአፍዎ ቅርጽ በመለየት ከጽሑፍ ወደ ንግግር እና ድምጽ መለወጥን የሚያበረታቱ ጥንታዊ ዘዴዎች ናቸው። ምንጭ-ማጣሪያ ቮኮዲንግ እና ወርልድ ንግግርን፣ ሙዚቃን እና ድምጽን ለግንኙነት፣ ተደራሽነት እና የሚዲያ ምርት በሚቀይሩ የኦዲዮ-AI የስራ ፍሰቶች ውስጥ ተቀምጧል። ጥልቅ ግንዛቤን ለመገንባት፣ ምንጭ-ማጣሪያ ቮኮዲንግ እና ዓለሙን እንደ ኦፕሬሽን ሞዴል እንጂ አንድ ባህሪ አይደለም፡ የተፈለገውን ውጤት ይግለጹ፣ ግምቶችን ያብራሩ እና ስርዓቱ የባለሙያዎችን ፍርድ ከሚያስፈልገው ነገር በአስተማማኝ ሁኔታ ይለዩ።

በተግባር፣ ምንጭ-ማጣሪያ ቮኮዲንግ እና ዎርልድ የሚጠቀሙ ጠንካራ ቡድኖች ጥራትን፣ መዘግየትን እና ፍቃድን እንደ የማሰማራቱ ስትራቴጂ እኩል አስፈላጊ አካል አድርገው ይመለከቱታል። ግልጽ የስኬት መስፈርቶችን ይመዘግባሉ፣ በተጨባጭ መረጃ እና የስራ ፍሰቶች ላይ ይፈትሻሉ፣ እና የአንድ ጊዜ ቤንችማርክ ከማሸነፍ ይልቅ በተስተዋሉ የውድቀት ቅጦች ላይ ተመስርተው ይደግማሉ። ይህ የንድፈ ሃሳባዊ ግንዛቤ በምርት፣ ፖሊሲ እና ኦፕሬሽኖች ላይ ወደ ዘላቂ አቅም የሚቀየርበት ነው።

በጽሑፍ፣ በትረካ እና በድምፅ በይነገጾች ተደራሽነትን ያሻሽላል። በተመሳሳይ ጊዜ፣ ፍቃድ ሲጎድል የድምጽ አላግባብ መጠቀም እና የማስመሰል አደጋዎች ይጨምራሉ። በጣም ጠንካራው አካሄድ የሙከራ ፍጥነትን ከአስተዳደር ዲሲፕሊን ጋር ማጣመር ነው፡ አብራሪዎችን ማስኬድ፣ ማስረጃን መያዝ፣ የውሳኔ ምዝግብ ማስታወሻዎችን ማተም እና የሞዴል ባህሪ፣ የተጠቃሚ የሚጠበቁ እና የቁጥጥር መስፈርቶች ሲዳብሩ ጥበቃዎችን ያለማቋረጥ ማዘመን ነው።

ስልታዊ ተጽእኖ

በጽሑፍ፣ በትረካ እና በድምፅ በይነገጾች ተደራሽነትን ያሻሽላል።

በጽሑፍ፣ በትረካ እና በድምፅ በይነገጾች ተደራሽነትን ያሻሽላል። ከፍተኛ ጥራት ባለው ማሰማራት ውስጥ፣ ይህ ወደሚለካ የአሠራር ደንቦች፣ የባለቤትነት ወሰኖች እና ተደጋጋሚ የግምገማ ሥነ ሥርዓቶች ይተረጎማል ስለዚህ ቡድኖች አሻሚነትን ከማስፋት ይልቅ በራስ መተማመንን ሊጨምሩ ይችላሉ።

የሚዲያ ቡድኖች በትንሽ በጀቶች የተጣራ ድምጽ በፍጥነት መላክ ይችላሉ።

የሚዲያ ቡድኖች በትንሽ በጀቶች የተጣራ ድምጽ በፍጥነት መላክ ይችላሉ። ከፍተኛ ጥራት ባለው ማሰማራት ውስጥ፣ ይህ ወደሚለካ የአሠራር ደንቦች፣ የባለቤትነት ወሰኖች እና ተደጋጋሚ የግምገማ ሥነ ሥርዓቶች ይተረጎማል ስለዚህ ቡድኖች አሻሚነትን ከማስፋት ይልቅ በራስ መተማመንን ሊጨምሩ ይችላሉ።

ከደንበኛ ጋር የሚገናኙ ስርዓቶች የንግግር ግንኙነቶችን በትልቁ ደረጃ ማካሄድ ይችላሉ።

ከደንበኛ ጋር የሚገናኙ ስርዓቶች የንግግር ግንኙነቶችን በትልቁ ደረጃ ማካሄድ ይችላሉ። ከፍተኛ ጥራት ባለው ማሰማራት ውስጥ፣ ይህ ወደሚለካ የአሠራር ደንቦች፣ የባለቤትነት ወሰኖች እና ተደጋጋሚ የግምገማ ሥነ ሥርዓቶች ይተረጎማል ስለዚህ ቡድኖች አሻሚነትን ከማስፋት ይልቅ በራስ መተማመንን ሊጨምሩ ይችላሉ።

የምንጭ-ማጣሪያ ቮኮዲንግ እና የዓለም የወደፊት

ንፁህ የምልክት ማቀናበሪያ ቮኮደሮች በአብዛኛው በነርቭ ቮኮደሮች (HiFi-GAN, WaveRNN) ተይዘዋል ለከፍተኛ-መጨረሻ ተፈጥሯዊነት, ነገር ግን ዓለም አልጠፋም. እሱ እንደ ፈጣን፣ ለሲፒዩ ተስማሚ የሆነ የፊት ጫፍ በድምፅ-መለዋወጫ ቧንቧዎች ውስጥ፣ የዘፈን አቀናባሪዎች እና የምርምር መነሻዎች ሆኖ ይኖራል፣ እና F0-plus-spectral-envelope ባህሪያቱ አሁንም ብዙ የነርቭ ሞዴሎችን ይመገባሉ። የአለም አይነት ሊተረጎሙ የሚችሉ መመዘኛዎች የነርቭ ዲኮደሮችን የሚመሩበት ዲቃላ ስርዓቶችን ይጠብቁ፣ ይህም ለፈጣሪዎች እውነታውን ሳይከፍሉ በድምፅ እና በእንጨት ላይ ትክክለኛ ቁጥጥር ያደርጋሉ።

የእውነተኛ-ዓለም አተገባበር

ንግግሩን ለመረዳት በሚያስችልበት ጊዜ የድምጽ መለዋወጫ መሳሪያዎች የተናጋሪውን ቃና እና ቲምበር የሚቀይሩ መሳሪያዎች

በአዳዲስ ቃናዎች ላይ ማስታወሻዎችን እንደገና የሚያዘጋጁ (እንደ UTAU/NNSVS ስነ-ምህዳር ያሉ) የዘፈን ድምጽ አቀናባሪዎች

ድምጽ ከማሰማትዎ በፊት F0፣ spectral እና aperiodicity ዥረቶችን የሚያመነጩ ፓራሜትሪክ የጽሑፍ-ወደ-ንግግር ሥርዓቶች

የንግግር ምርምር መነሻዎች ለድምፅ መቀያየር፣ ጊዜ ማራዘሚያ እና ፕሮሶዲ አርትዖት ያለ ዳግም ስልጠና

የትግበራ ቅጦች

ምንጭ-አጣራ ቮኮዲንግ እና አለም በተግባር

ንግግሩን ለመረዳት በሚያስችልበት ጊዜ የድምጽ መለዋወጫ መሳሪያዎች የተናጋሪውን ቃና እና ቲምበር የሚቀይሩ መሳሪያዎች።

የንግግር ልውውጦችን እየጠበቁ የድምጽ መለዋወጫ መሳሪያዎች የድምጽ መለዋወጫ መሳሪያዎች እና የንግግር ችሎታ ያላቸው ቡድኖች ብዙውን ጊዜ የጥራት ደረጃዎችን ፊት ለፊት ሲገልጹ, የሰው ልጅን ለጫፍ ጉዳዮችን ከፍ ለማድረግ እና ሁለቱንም የምርታማነት ግኝቶችን እና የስህተት ወጪዎችን በጊዜ ሂደት ሲከታተሉ የተሻለ ውጤት ያገኛሉ.

ምንጭ-አጣራ ቮኮዲንግ እና አለም በተግባር

በአዳዲስ ቃናዎች ላይ ማስታወሻዎችን እንደገና የሚያዘጋጁ (እንደ UTAU/NNSVS ስነ-ምህዳር ያሉ) የዘፈን ድምጽ አቀናባሪዎች።

ዝማሬ የድምጽ ማቀናበሪያዎች (እንደ UTAU/NNSVS ስነ-ምህዳር ያሉ) ማስታወሻዎችን በአዲስ ፕላቶች ላይ እንደገና የሚያሰራጩ ቡድኖች ብዙውን ጊዜ የጥራት ደረጃዎችን ከፊት ሲገልጹ የተሻለ ውጤት ያገኛሉ፣ ለዳር ጉዳዮች የሰው ልጅ እድገት መንገድን ይጠብቃሉ እና ሁለቱንም የምርታማነት ግኝቶችን እና የስህተት ወጪዎችን በጊዜ ሂደት ይከታተላሉ።

ምንጭ-አጣራ ቮኮዲንግ እና አለም በተግባር

ከድምጽ መስጫ በፊት F0፣ spectral እና aperiodicity ዥረቶችን የሚያመነጩ ፓራሜትሪክ የጽሑፍ-ወደ-ንግግር ሥርዓቶች።

ከድምጽ አሰጣጥ በፊት F0፣ spectral እና aperiodicity ዥረቶችን የሚያመነጩ ፓራሜትሪክ የጽሑፍ-ወደ-ንግግር ሥርዓቶች ቡድኖች ብዙውን ጊዜ የጥራት ደረጃዎችን ፊት ለፊት ሲገልጹ የተሻለ ውጤት ያገኛሉ፣ ለጫፍ ጉዳዮች የሰው ልጅ እድገት መንገድን ይጠብቃሉ፣ እና ሁለቱንም የምርታማነት ትርፍ እና የስህተት ወጪዎችን በጊዜ ሂደት ይከታተላሉ።

ምንጭ-አጣራ ቮኮዲንግ እና አለም በተግባር

የንግግር ምርምር መነሻዎች ለድምፅ መቀያየር፣ ጊዜ ማራዘሚያ እና ፕሮሶዲ አርትዖት ያለ ዳግም ስልጠና።

የንግግር ምርምር መነሻዎች ለፒች ፈረቃ፣ ጊዜ ማራዘሚያ እና ፕሮሶዲ አርትዖት ያለ ዳግም ማሰልጠኛ ቡድኖች ብዙውን ጊዜ የጥራት ደረጃዎችን ከፊት ሲገልጹ የተሻለ ውጤት ያገኛሉ ፣ ለጫፍ ጉዳዮች የሰውን እድገት መንገድ ሲይዙ እና ሁለቱንም የምርታማነት ትርፍ እና የስህተት ወጪዎችን በጊዜ ሂደት ይከታተላሉ።

አደጋዎች እና የጥበቃ መንገዶች

!

ስምምነት ሲጠፋ የድምፅ አላግባብ መጠቀም እና የማስመሰል አደጋዎች ይጨምራሉ።

!

ትክክለኛነት በአነጋገር ዘዬዎች፣ ቀበሌኛዎች ወይም ጫጫታ አካባቢዎች ላይ ሊወድቅ ይችላል።

!

ሰራሽ ኦዲዮ ግልጽ ምልክት ሳይደረግበት ለትክክለኛ ንግግር ሊሳሳት ይችላል።

የትግበራ ፍኖተ ካርታ

1

ለድምጽ ቀረጻ፣ ክሎኒንግ እና እንደገና ጥቅም ላይ ለማዋል ግልጽ የሆነ ፈቃድ ያግኙ።

ለድምጽ ቀረጻ፣ ክሎኒንግ እና እንደገና ጥቅም ላይ ለማዋል ግልጽ የሆነ ፈቃድ ያግኙ። እያንዳንዱን እርምጃ እንደማስረጃ በር ያዙት፡ መመዘኛዎቹ ካልተሟሉ፣ መልቀቅን ለአፍታ አቁም፣ ክፍተቱን ይዝጉ እና ከዚያ ብቻ አጠቃቀምን ያስፋፉ።

2

በተለያዩ የድምጽ ማጉያዎች እና የበስተጀርባ ሁኔታዎች ላይ ጥራትን ይሞክሩ።

በተለያዩ የድምጽ ማጉያዎች እና የበስተጀርባ ሁኔታዎች ላይ ጥራትን ይሞክሩ። እያንዳንዱን እርምጃ እንደማስረጃ በር ያዙት፡ መመዘኛዎቹ ካልተሟሉ፣ መልቀቅን ለአፍታ አቁም፣ ክፍተቱን ይዝጉ እና ከዚያ ብቻ አጠቃቀምን ያስፋፉ።

3

አንድ ሰው መቼ ውጤቶችን መገምገም ወይም ማጽደቅ እንዳለበት ይግለጹ።

አንድ ሰው መቼ ውጤቶችን መገምገም ወይም ማጽደቅ እንዳለበት ይግለጹ። እያንዳንዱን እርምጃ እንደማስረጃ በር ያዙት፡ መመዘኛዎቹ ካልተሟሉ፣ መልቀቅን ለአፍታ አቁም፣ ክፍተቱን ይዝጉ እና ከዚያ ብቻ አጠቃቀምን ያስፋፉ።

4

ሰው ሰራሽ ኦዲዮን ይሰይሙ እና ለተጠያቂነት የፕሮቨንስ መዝገቦችን ያስቀምጡ።

ሰው ሰራሽ ኦዲዮን ይሰይሙ እና ለተጠያቂነት የፕሮቨንስ መዝገቦችን ያስቀምጡ። እያንዳንዱን እርምጃ እንደማስረጃ በር ያዙት፡ መመዘኛዎቹ ካልተሟሉ፣ መልቀቅን ለአፍታ አቁም፣ ክፍተቱን ይዝጉ እና ከዚያ ብቻ አጠቃቀምን ያስፋፉ።

ማሰስዎን ይቀጥሉ