Audio AI Itọsọna

Moshi Full-Duplex Ọrọ

Moshi jẹ orisun-ìmọ, ohun akoko gidi AI lati Kyutai ti o sọrọ ati tẹtisi ni akoko kanna - kikun-duplex - dipo gbigbe awọn iyipada to muna.

2 min kakẹhin imudojuiwọn

Akopọ

That removes the awkward lag and rigid turn-taking of traditional voice assistants.

Jin Dive

Moshi, ti a tu silẹ nipasẹ lab Faranse Kyutai ni ọdun 2024, jẹ awoṣe ipilẹ-ọrọ-si-ọrọ ti a ṣe fun adayeba, ibaraẹnisọrọ lairi kekere. Ko dabi awọn oluranlọwọ opo gigun ti epo ti o de ọrọ-si-ọrọ, lẹhinna awoṣe ede kan, lẹhinna ọrọ-si-ọrọ, Moshi ṣe amojuto ohun ohun taara ati nigbagbogbo. Ero bọtini rẹ jẹ ile oloke meji ni kikun: o ṣe awoṣe awọn ṣiṣan ohun afetigbọ meji nigbakanna - ti olumulo ati tirẹ - nitorinaa o le tẹtisi lakoko sisọ, mu awọn idilọwọ, ikanni ẹhin pẹlu 'mhm,' ati ni lqkan nipa ti ara bi eniyan ṣe. O de lairi ni ayika 160-200 milliseconds, jina ni isalẹ aisun arannilọwọ aṣoju. Labẹ hood o ṣe akopọ 7B-paramita ọrọ-ati awoṣe ede ohun (Helium) pẹlu Mimi, kodẹki ohun nkankikan ti o fi ọrọ si awọn ami ami iyasọtọ ti awoṣe le ṣe ipilẹṣẹ. Kyutai ṣe idasilẹ awọn iwuwo ati koodu ni gbangba.

Imọ-imọ-ẹrọ

Ẹtan Moshi ni kodẹki Mimi rẹ, eyiti o yi ohun afetigbọ lilọsiwaju sinu ṣiṣan kekere-bitrate ti awọn ami iyasọtọ ni 12.5 Hz, pẹlu ami ami atunmọ distilled. Awoṣe ede ṣe asọtẹlẹ awọn ami-ọrọ ọrọ tirẹ ati ti olumulo ni awọn ṣiṣan ti o ni ibamu pẹlu akoko, nitorinaa iran ko ni lati da duro lati 'gbọ.' Ọna 'Monologue inu' kan sọ asọtẹlẹ ọrọ ṣaaju ohun, imudara didara ede ati isokan ti ohun ti Moshi sọ gaan.

Ipa Ilana

Wiwọle ati arọwọto

O ṣe ilọsiwaju iraye si nipasẹ transcription, alaye, ati awọn atọkun ohun.

Iye owo ati isuna

Awọn ẹgbẹ Media le firanṣẹ ohun didan yiyara pẹlu awọn isuna-owo kekere.

Iyara ati iwọn

Awọn ọna ṣiṣe ti nkọju si alabara le ṣe ilana awọn ibaraẹnisọrọ sisọ ni iwọn nla.

Ojo iwaju ti Moshi Full-Duplex Ọrọ

Awoṣe kikun-duplex n di awoṣe fun ohun adayeba AI, ti o ni ipa awọn ọna ṣiṣe kọja ile-iṣẹ naa. Reti kere, awọn ẹya lori ẹrọ, atilẹyin multilingual, airi kekere, ati isọpọ sinu awọn aṣoju, iṣẹ alabara, ati awọn irinṣẹ iraye si. Nitoripe Moshi wa ni sisi, awọn oniwadi le ṣe iwadii ati ilọsiwaju larọwọto. Awọn italaya wa ni ayika igbẹkẹle otitọ, ailewu ni ọrọ agbekọja, ati nuance ẹdun, ṣugbọn iyipada lati yiyi-lile si omi, ibaraẹnisọrọ idilọwọ le yẹ.

Real-World imuse

Alabaṣepọ ohun ti ko ni ọwọ o le da gbigbi gbolohun ọrọ aarin duro, pẹlu awọn idahun labẹ 200 milliseconds.

Ṣii ipilẹ iwadi fun kikọ akoko gidi, ọrọ sisọ ni kikun-duplex laisi awọn apoti dudu ti ohun-ini.

Awọn oluranlọwọ iraye si ti o sọrọ ni omi pẹlu awọn olumulo ti o nilo iyara, ẹhin-ati-jade adayeba.

Aṣafọwọṣe awọn botilẹti ohun alabara-iṣẹ idalọwọduro ti o ṣe afẹyinti ikanni ati fesi lakoko ti olupe naa n sọrọ.

Awọn ewu & Awọn ọna iṣọ

ilokulo ohun ati awọn ewu afarawe ṣe pọ si nigbati igbanilaaye ba sonu.

Yiye le ju silẹ kọja awọn asẹnti, awọn ede-ede, tabi awọn agbegbe alariwo.

Ohun afetigbọ sintetiki le jẹ aṣiṣe fun ọrọ ododo laisi isamisi to yege.

Ilana Ilana imuse

1

Gba ifọkansi ti o fojuhan fun gbigba ohun, ti ẹda, ati ilotunlo.

2

Didara idanwo kọja awọn agbohunsoke oniruuru ati awọn ipo abẹlẹ.

3

Ṣetumo nigbati eniyan gbọdọ ṣe atunyẹwo tabi fọwọsi awọn abajade.

4

Aami ohun sintetiki ki o tọju awọn igbasilẹ provenance fun iṣiro.

Tesiwaju Ṣiṣawari

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Moshi Full-Duplex Speech quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Bẹrẹ adanwo

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Itọsọna atẹle

Iṣe deede Ọrọ fun Ọrọ

Awọn ibeere ti a beere nigbagbogbo

What is Moshi Full-Duplex Speech?

Moshi jẹ orisun-ìmọ, ohun akoko gidi AI lati Kyutai ti o sọrọ ati tẹtisi ni akoko kanna - kikun-duplex - dipo gbigbe awọn iyipada to muna. Iyẹn yọkuro aisun airọrun ati gbigbe titan ti awọn oluranlọwọ ohun ibile.

Kini 'duplex kikun' tumọ si ni ọrọ ti Moshi?

Ni kikun-ile oloke meji tumo si awọn awoṣe kapa ti nwọle ati awọn iwe ohun ti njade nigbakanna, ki o le tẹtisi nigba ti soro ki o si mu awọn idalọwọduro nipa ti ara.

Ẹgbẹ wo ni o tu Moshi silẹ?

Moshi jẹ idagbasoke ati ṣiṣi-orisun nipasẹ Kyutai, laabu iwadii AI Faranse kan, ni ọdun 2024.

Kini Mimi ninu eto Moshi?

Mimi jẹ koodu ohun afetigbọ nkankikan ti o rọ ọrọ lilọsiwaju sinu ṣiṣan kekere-bitrate ti awọn ami iyasọtọ ti awoṣe le ṣe ipilẹṣẹ.

Bawo ni Moshi ṣe yatọ si opo gigun ti oluranlọwọ ohun ibile?

Awọn oluranlọwọ ibilẹ sọ ọrọ-si-ọrọ, awoṣe ede, ati ọrọ-si-ọrọ; Moshi jẹ awoṣe ọrọ-si-ọrọ kan ti nmu ohun afetigbọ nigbagbogbo.

Ni aijọju kini airi ibaraẹnisọrọ wo ni Moshi fojusi?

Moshi ṣaṣeyọri lairi ni ayika 160-200 ms, ti o kere pupọ ju awọn oluranlọwọ ohun aṣoju lọ, ti n muu ṣiṣẹ ni lqkan adayeba ati idalọwọduro.