A seguirPróximo guia
Normalização de texto para fala
IA de áudio
GUIA de IA de áudio
A Tradução de Fala para Fala (S2ST) pega palavras faladas em um idioma e produz palavras faladas em outro – de preferência preservando a voz, o tom e o tempo do locutor.
Ouça este guiaNarrado por IA · ~2 min
É o tão procurado 'tradutor universal' para conversas ao vivo.
A tradução de fala para fala converte o áudio de um idioma de origem em áudio de um idioma de destino. A abordagem clássica é uma cascata: o reconhecimento de fala (ASR) transcreve a entrada, a tradução automática converte o texto e a conversão de texto em fala (TTS) fala o resultado. Isso funciona, mas acumula erros em cada estágio e adiciona latência. Os sistemas “diretos” ou de ponta a ponta mais recentes traduzem fala em fala com menos etapas intermediárias de texto, reduzindo o atraso e preservando melhor as qualidades expressivas. O pacote SeamlessM4T e Seamless de Meta é traduzido em cerca de 100 idiomas e tem como objetivo manter o estilo vocal, a emoção e o ritmo do locutor. Um problema difícil é a tradução em tempo real e de baixa latência: o sistema deve começar a traduzir antes que a frase termine, equilibrando velocidade e precisão.
Tradução de videochamada ao vivo que permite que os participantes falem seus próprios idiomas e ouçam uns aos outros nos seus.
Fones de ouvido e óculos AR que traduzem uma conversa rapidamente durante uma viagem ao exterior.
Dobrar filmes e vídeos para outros idiomas, preservando as vozes e emoções dos locutores originais.
Ambientes de emergência e de cuidados de saúde onde um médico e um paciente que não partilham uma linguagem comum podem comunicar rapidamente.
O objetivo é uma tradução perfeita e quase instantânea que mantenha sua própria voz e emoção, incorporadas em fones de ouvido, óculos e videochamadas. Espere uma cobertura mais ampla de idiomas com poucos recursos, menor latência e melhor manuseio de gírias, nomes e falantes sobrepostos. A preservação da voz levanta questões de consentimento e deepfake, de modo que as marcas d'água e as proteções aumentarão. À medida que os modelos para uso no dispositivo diminuem, a tradução privada off-line pode tornar a conversação multilíngue em tempo real uma rotina para viagens, saúde e colaboração global.
Boletim informativo gratuito
Três histórias verificadas de IA a cada manhã de dia útil, escritas em linguagem simples. Gratuito para sempre, sem anúncios.
Um e-mail a cada dia útil. Cancele a inscrição com um clique. Nunca vendemos ou compartilhamos seu endereço.
Teste você mesmo
Feedback instantâneo sobre cada resposta e um certificado compartilhável com um ID verificável assim que você concluir um curso.
Apoie a educação gratuita em IA. O AI Understanding é uma organização sem fins lucrativos 501(c)(3) — sem anúncios, sem paywall, nunca. Faça uma doação
A Tradução de Fala para Fala (S2ST) pega palavras faladas em um idioma e produz palavras faladas em outro – de preferência preservando a voz, o tom e o tempo do locutor. É o tão procurado 'tradutor universal' para conversas ao vivo.
S2ST recebe entrada falada em um idioma de origem e produz saída falada em um idioma de destino, preservando idealmente a voz e o tom.
Uma cascata encadeia ASR (fala para texto), tradução automática e TTS (texto para fala), com erros potencialmente se acumulando em cada estágio.
Os sistemas diretos mapeiam a fala para a fala com menos etapas intermediárias de texto, reduzindo o atraso e ajudando a reter qualidades expressivas como a prosódia.
O SeamlessM4T de Meta e o conjunto Seamless traduzem em cerca de 100 idiomas e visam preservar o estilo e a emoção do orador.
Como a ordem das palavras difere entre os idiomas, um sistema de streaming deve se comprometer com a saída antes que o locutor termine, trocando velocidade pela precisão.
Continue aprendendo
Mais guias escolhidos para este tópico
A seguirPróximo guia
Normalização de texto para fala
IA de áudio