학습
뉴스
도구
Jobs
용어집
인증
퀴즈
미션
지원
English
Search
⌘K
AI 도구 제출
기부
English
Search
⌘K
학습
AI Guides & Foundations
뉴스
Latest AI Developments
도구
Top AI Directory
Jobs
AI Hiring Board
용어집
AI Terms Dictionary
인증
Get Your AI Certificate
퀴즈
Interactive AI Assessments
미션
Why We Exist
지원
Help and Contact
AI 도구 제출
기부
English
← 모든 퀴즈로 돌아가기
가이드 연계 퀴즈 • 중간 레벨 • 6 질문
WordPiece 토큰화 퀴즈
WordPiece가 텍스트를 분할하는 방법과 그것이 사용되는 이유에 대한 이해를 테스트하십시오.
관련 가이드 경로
워드피스 토큰화
질문 1 의 6
정답: 0
WordPiece 출력에서 '##' 접두사는 무엇을 나타냅니까?
힌트가 필요하신가요?
토큰은 단어 초기가 아닌 단어 내부의 연속 부분입니다.
토큰은 [SEP]와 같은 특수 구분 기호입니다.
토큰은 어휘에서 가장 높은 빈도를 갖습니다.
토큰은 알 수 없는 어휘 마커입니다.