Audio AI Itọsọna

Jin Ariwo bomole Ipenija

Ipenija Noise ti o jinlẹ (DNS) jẹ idije Microsoft-ṣiṣe ti o titari awọn oniwadi lati kọ awọn nẹtiwọọki nkankikan ti o yọ ariwo isale kuro ninu ọrọ ni akoko gidi.

2 min kakẹhin imudojuiwọn

Akopọ

O ṣeto awọn itọkasi igbalode ti o ṣe agbara awọn ẹya bii Awọn ẹgbẹ ati yiyọ ariwo Zoom.

Jin Dive

Ti ṣe ifilọlẹ nipasẹ Microsoft ni ọdun 2020 ati tun ṣe fun ọpọlọpọ ọdun (nigbagbogbo ni INTERSPEECH ati ICASSP), Ipenija DNS fun awọn ẹgbẹ ni titobi nla, data ti o ni idiwọn ti ọrọ mimọ, awọn agekuru ariwo, ati awọn gbigbasilẹ alariwo idapọpọ synthetically. Ni pataki, o yi igbelewọn kuro lati iṣiro ami ifihan agbalagba bi PESQ si awọn ikun gbigbọ eniyan ati awọn asọtẹlẹ ti o kọ ẹkọ ti didara akiyesi. O tun ṣafikun awọn ipo gidi-aye lile: awọn yara ifarabalẹ, awọn ariwo ti ko duro (titẹ, awọn aja, sirens), awọn ariwo ohun orin, ati awọn oju iṣẹlẹ ti ara ẹni nibiti awoṣe kan gbọdọ tẹ gbogbo eniyan lẹnu ayafi agbọrọsọ ibi-afẹde ti o forukọsilẹ. Nipa itusilẹ data, awọn ipilẹ-ipilẹ, ati ṣeto idanwo ti o wọpọ, o jẹ ki awọn labs ṣe afiwe awọn eso apples si awọn apples ati ki o yara gbigbe lati awọn ẹtan sisẹ si ipari-si-opin ikẹkọ jinlẹ fun imudara ọrọ.

Imọ-imọ-ẹrọ

Awọn titẹ sii ni deede jẹ ifunni igba kukuru Fourier ti ariwo igbi igbi pada sinu loorekoore tabi nẹtiwọọki ariyanjiyan ti o sọ asọtẹlẹ iboju-igbohunsafẹfẹ akoko kan. Ilọpo iboju-boju nipasẹ alariwo spekitiriumu n dinku awọn apoti ti o jẹ gaba lori ariwo lakoko ti o tọju awọn ti o jẹ gaba lori ọrọ, lẹhinna STFT onidakeji tun ṣe agbekalẹ igbi. Awọn ofin akoko-gidi fi agbara lairi algorithmic (ni ayika 40 ms) ati nilo sisẹ idi, nitorinaa awọn awoṣe ko le wo ohun afetigbọ ọjọ iwaju nigbati o ba nu fireemu lọwọlọwọ.

Ipa Ilana

Wiwọle ati arọwọto

O ṣe ilọsiwaju iraye si nipasẹ transcription, alaye, ati awọn atọkun ohun.

Iye owo ati isuna

Awọn ẹgbẹ Media le firanṣẹ ohun didan yiyara pẹlu awọn isuna-owo kekere.

Iyara ati iwọn

Awọn ọna ṣiṣe ti nkọju si alabara le ṣe ilana awọn ibaraẹnisọrọ sisọ ni iwọn nla.

Ojo iwaju ti Ipenija Ipapa ariwo Ariwo

Reti ilana lati faagun si ọna ti ara ẹni ati idinku multimodal, nibiti gbigbe ète tabi titẹ ohun agbohunsoke ṣe itọsọna kini lati tọju. Awọn awoṣe n dinku lati ṣiṣẹ lori ẹrọ fun awọn afikọti ati awọn ohun elo igbọran, ati sisẹ 48 kHz-kikun ti n di boṣewa nitorina orin ati awọn igbohunsafẹfẹ giga ye. Awọn isunmọ ti ipilẹṣẹ ti o tun ṣe atunṣe ọrọ mimọ, kuku ju ariwo boju nikan, jẹ aala ti nṣiṣe lọwọ ati nigbakan ariyanjiyan.

Real-World imuse

Iyọkuro ariwo ni akoko gidi ni Microsoft Awọn ẹgbẹ ati awọn ohun elo ipe fidio miiran

Yiyasọ ọrọ mimọ ni awọn agbekọri ati awọn agbekọri lakoko awọn irin-ajo tabi awọn kafe ti o nšišẹ

Ṣiṣe-ṣaaju awọn igbasilẹ aaye alariwo ṣaaju ṣiṣe transcription laifọwọyi tabi ifori

Imudarasi oye ni awọn iranlọwọ igbọran ati awọn ohun elo igbọran iranlọwọ

Awọn ewu & Awọn ọna iṣọ

ilokulo ohun ati awọn ewu afarawe ṣe pọ si nigbati igbanilaaye ba sonu.

Yiye le ju silẹ kọja awọn asẹnti, awọn ede-ede, tabi awọn agbegbe alariwo.

Ohun afetigbọ sintetiki le jẹ aṣiṣe fun ọrọ ododo laisi isamisi to yege.

Ilana Ilana imuse

1

Gba ifọkansi ti o fojuhan fun gbigba ohun, ti ẹda, ati ilotunlo.

2

Didara idanwo kọja awọn agbohunsoke oniruuru ati awọn ipo abẹlẹ.

3

Ṣetumo nigbati eniyan gbọdọ ṣe atunyẹwo tabi fọwọsi awọn abajade.

4

Aami ohun sintetiki ki o tọju awọn igbasilẹ provenance fun iṣiro.

Tesiwaju Ṣiṣawari

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Deep Noise Suppression Challenge quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Bẹrẹ adanwo

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Awọn ibeere ti a beere nigbagbogbo

Kini Ipenija Imukuro Ariwo Jinlẹ?

Ipenija Noise ti o jinlẹ (DNS) jẹ idije Microsoft-ṣiṣe ti o titari awọn oniwadi lati kọ awọn nẹtiwọọki nkankikan ti o yọ ariwo isale kuro ninu ọrọ ni akoko gidi. O ṣeto awọn aṣepari ode oni ti awọn ẹya agbara bii Awọn ẹgbẹ ati yiyọ ariwo Sun-un.

Ẹgbẹ wo ni o ṣe ifilọlẹ Ipenija Noise Suppression (DNS)?

Microsoft ṣe ifilọlẹ Ipenija DNS ni ọdun 2020 o si ṣiṣẹ ni awọn aaye bii INTERSPEECH ati ICASSP.

Kini ibi-afẹde akọkọ ti awọn eto ti a ṣe fun Ipenija DNS?

Ipenija naa dojukọ imudara ọrọ-ọrọ ni akoko gidi, didi ariwo lakoko titọju ohun agbọrọsọ.

Kini idi ti sisẹ DNS gidi-gidi ṣe idiwọ awọn awoṣe lati lo awọn fireemu ohun afetigbọ ọjọ iwaju?

Ibaraẹnisọrọ laaye nilo okunfa, sisẹ lairi kekere, nitorinaa awoṣe le lo ohun ti o kọja ati lọwọlọwọ nikan.

Ilana ti o wọpọ ni awọn titẹ sii DNS ni lati ṣe asọtẹlẹ 'boju-boju kan'. Kini iboju-boju ṣe?

Iboju-igbohunsafẹfẹ akoko kan ti pọ pẹlu alariwo spekitiriumu lati dinku awọn apoti ti ariwo ti jẹ gaba lori ati idaduro ọrọ duro.

Bawo ni Ipenija DNS ṣe yipada bawo ni imudara ọrọ ti ṣe iṣiro?

Ipenija naa gbe si awọn idanwo igbọran eniyan ati kọ ẹkọ awọn asọtẹlẹ didara-iwoye dipo iṣiro ami ifihan nikan.