← 모든 퀴즈로 돌아가기가이드 연계 퀴즈 • 중간 레벨 • 6 질문

토큰화 퀴즈

텍스트가 토큰으로 분할되는 방식과 이것이 비용, 컨텍스트 제한 및 모델 동작에 영향을 미치는 이유를 테스트해 보세요.

언어 모델의 맥락에서 '토큰'이란 무엇입니까?