GUIA de IA de linguagem

Perdido no efeito intermediário

O efeito “perdido no meio” é a tendência dos modelos de linguagem de usar melhor a informação quando ela aparece no início ou no final de uma entrada longa, ignorando os fatos enterrados no meio.

Ouça este guiaNarrado por IA · ~2 min

Nesta página2 minutos de leitura
  1. Visão geral
  2. Mergulho profundo
  3. Implementação no mundo real
  4. O futuro do efeito perdido no meio
  5. Colocando em prática
  6. Continue explorando
  7. Perguntas frequentes

Visão geral

Isso importa porque limita o quanto podemos confiar em modelos de longo contexto com documentos recuperados.

Mergulho profundo

Identificado num estudo de 2023 realizado por Liu e colegas de Stanford, o efeito apareceu quando os modelos receberam muitos documentos e foram solicitados a responder usando um que continha o facto principal. A precisão formou uma curva em forma de U: mais alta quando a passagem relevante estava no início ou no final do prompt, e visivelmente mais baixa quando estava no meio. Isso vale mesmo para modelos comercializados como capazes de longo contexto. A implicação é nítida para a geração com recuperação aumentada: colocar dezenas de passagens em um prompt não garante que o modelo as leia uniformemente. A posição, e não apenas a presença, determina se um modelo atende a um fato. O trabalho reformulou o contexto longo como uma questão de uso eficaz, e não de tamanho bruto da janela.

Implementação no mundo real

Um sistema RAG recupera 20 documentos, mas erra a resposta porque caiu na passagem 10 de 20.

Os engenheiros reclassificam os resultados da pesquisa para colocar a parte mais relevante em primeiro ou último lugar no prompt.

Um resumidor de documentos longos subestima os principais detalhes que aparecem no meio de um contrato.

Um benchmark de 'agulha em um palheiro' esconde um fato em profundidades variadas para mapear a precisão posicional de um modelo.

O futuro do efeito perdido no meio

Os pesquisadores estão abordando o efeito com modificações de atenção, treinamento de reconhecimento de posição e recuperação mais inteligente que reclassifica as passagens mais relevantes nas bordas do prompt. Os conjuntos de avaliação agora incluem testes de “agulha no palheiro” em todos os cargos para medir o contexto eficaz. À medida que as arquiteturas melhoram, a curva em U se achata, mas os profissionais continuarão projetando pipelines que colocam evidências críticas onde os modelos realmente aparecem, em vez de confiar na atenção uniforme.

Colocando em prática

Por que isso importa

  • Velocidade e escala. Os fluxos de trabalho de idiomas podem avançar mais rapidamente sem sacrificar a consistência.
  • Acesso e alcance. Ele expande o acesso entre idiomas e estilos de comunicação.
  • Decisões mais claras. As equipes podem gastar mais tempo julgando enquanto a automação cuida da repetição.

Cuidado com

  • Fatos alucinados podem entrar silenciosamente em relatórios, fluxos de apoio ou resultados de pesquisas.
  • A sensibilidade do prompt pode criar resultados inconsistentes em solicitações semelhantes.
  • Dados de texto confidenciais podem ser expostos se os controles de acesso forem fracos.

Próximas etapas

  1. Defina o formato de saída, o tom e os padrões de qualidade antes da implementação.
  2. Respostas terrestres com fontes confiáveis ​​sempre que a precisão for importante.
  3. Mantenha um ponto de verificação de revisão humana para resultados de alto risco.
  4. Rastreie padrões de falha e treine novamente prompts ou fluxos de trabalho regularmente.

Continue explorando

Boletim informativo gratuito

Receba o resumo diário de IA

Três histórias verificadas de IA a cada manhã de dia útil, escritas em linguagem simples. Gratuito para sempre, sem anúncios.

Um e-mail a cada dia útil. Cancele a inscrição com um clique. Nunca vendemos ou compartilhamos seu endereço.

Teste você mesmo

Take the Lost in the Middle Effect quiz

Feedback instantâneo sobre cada resposta e um certificado compartilhável com um ID verificável assim que você concluir um curso.

Iniciar teste

Apoie a educação gratuita em IA. O AI Understanding é uma organização sem fins lucrativos 501(c)(3) — sem anúncios, sem paywall, nunca. Faça uma doação

Perguntas frequentes

O que é o Efeito Perdido no Meio?

O efeito “perdido no meio” é a tendência dos modelos de linguagem de usar melhor a informação quando ela aparece no início ou no final de uma entrada longa, ignorando os fatos enterrados no meio. É importante porque limita o quanto podemos confiar em modelos de longo contexto com documentos recuperados.

What positional pattern did the lost-in-the-middle study report?

The paper observed a U-shaped pattern with weaker performance in the middle.

What was the study’s task setup?

The study evaluated long-context use with retrieval-style tasks.

What does this effect imply about a large context window?

The study found performance can depend on the position of relevant information.

A RAG prompt includes many retrieved passages. What should be evaluated?

The guide says stuffing passages does not ensure they are used evenly.

Why might a relevant fact in the middle be missed?

The paper observes that position affects effective use, not simply presence.