무엇입니까? 지속적인 학습?

변환기가 과거 주의를 다시 계산하지 않고 새 토큰을 생성할 수 있도록 하는 이전 토큰의 저장된 키 및 값 텐서입니다.

훈련 세트 외부에서 볼 수 없는 새로운 데이터에 대해 모델이 얼마나 잘 수행되는지입니다.

모델의 학습 데이터에 반영된 최신 시점입니다.

명시적인 목표 출력 없이 레이블이 지정되지 않은 데이터에서 패턴을 학습합니다.

사전 일반 지식에 의존하여 작업별 예시 없이 작업을 해결합니다.

모델 일반화를 개선하기 위해 수정된 훈련 예제를 생성하는 기술.