A continuaciónSiguiente guía
Redes neuronales recurrentes
Fundamentos
GUÍA Técnica
Una red recurrente bidireccional lee una secuencia tanto hacia adelante como hacia atrás, por lo que la representación de cada posición se basa en el contexto del pasado y el futuro.
Escuche esta guíaNarrado por IA · ~2 min
This matters because meaning often depends on what comes next, not just what came before.
Propuesto por Schuster y Paliwal en 1997, el RNN bidireccional ejecuta dos capas recurrentes separadas sobre la misma entrada: una procesa la secuencia de izquierda a derecha y la otra de derecha a izquierda. Luego, sus estados ocultos se combinan, generalmente mediante concatenación, para formar una representación en cada paso de tiempo que codifica todo el contexto circundante. Esto es potente para tareas en las que toda la entrada está disponible a la vez. Por ejemplo, para etiquetar el banco de palabras como una institución financiera versus una orilla de un río, un modelo se beneficia al ver palabras en ambos lados. Los LSTM y GRU bidireccionales se convirtieron en estándar para el reconocimiento de entidades nombradas, el etiquetado de partes del discurso y el reconocimiento de voz. La limitación clave es que la red necesita la secuencia completa antes de producir resultados, por lo que no se puede utilizar para predicción en tiempo real, streaming o generativa de izquierda a derecha.
Reconocimiento de entidad con nombre, donde las palabras circundantes en ambos lados ayudan a clasificar un token como persona, lugar u organización.
Etiquetado de parte del discurso que elimina la ambigüedad de palabras como "liderar" usando el contexto anterior y posterior
Modelado acústico en reconocimiento de voz fuera de línea donde está disponible el enunciado completo
Etiquetado de secuencias de proteínas o ADN en bioinformática, donde los motivos dependen de residuos flanqueantes
El contexto bidireccional sigue vivo en los codificadores modernos: los Transformers estilo BERT logran el mismo objetivo con atención enmascarada en lugar de recurrencia, y se paralelizan mucho mejor. Los RNN bidireccionales siguen siendo relevantes en canalizaciones ligeras, procesamiento de audio y bioseñales, y entornos donde las secuencias completas son cortas y están etiquetadas. Se espera un uso continuo en tareas de codificación especializadas y tolerantes a la latencia, mientras que los codificadores bidireccionales basados en la atención dominan la comprensión del lenguaje a gran escala.
Boletín gratuito
Tres noticias verificadas sobre IA cada mañana de lunes a viernes, explicadas con claridad. Gratis para siempre y sin anuncios.
Un correo cada día laborable. Date de baja con un clic. Nunca vendemos ni compartimos tu dirección.
Ponte a prueba
Corrección inmediata en cada respuesta y un certificado para compartir, con un ID verificable, cuando apruebas un curso.
Apoya la educación gratuita sobre IA. AI Understanding es una organización sin fines de lucro 501(c)(3): sin anuncios ni muros de pago, nunca. Hacer una donación
Una red recurrente bidireccional lee una secuencia tanto hacia adelante como hacia atrás, por lo que la representación de cada posición se basa en el contexto del pasado y el futuro. Esto es importante porque el significado a menudo depende de lo que viene después, no sólo de lo que vino antes.
The guide describes two recurrent passes over the same input in opposite directions.
The guide gives contextual disambiguation as a benefit of bidirectional representations.
The guide says the directional states are typically concatenated before output.
The guide notes the full input must be available before outputs using future context can be produced.
Both passes provide context before and after the current position.
sigue aprendiendo
Más guías seleccionadas para este tema.
A continuaciónSiguiente guía
Redes neuronales recurrentes
Fundamentos