O que é Modelo esparso?

Uma política em que as cargas de solicitação/resposta não são armazenadas após o processamento além das janelas operacionais de curta duração.

Um padrão de atenção em que cada token atende apenas a uma janela de tamanho fixo de tokens próximos para reduzir a computação.

Um padrão de ataque em que instruções maliciosas são inseridas nas entradas do modelo ou no conteúdo recuperado.

Uma abordagem de treinamento e modelagem de comportamento em que os resultados do modelo são guiados por um conjunto fixo de princípios escritos.

Um espaço representacional comprimido onde conceitos semelhantes são posicionados próximos uns dos outros como vetores.

Um método de aceleração de inferência em que um modelo pequeno propõe tokens que um modelo maior verifica em paralelo.