Tillbaka till alla frågesporterGuidelänkat frågesportMedium Nivå6 Frågor

Tokeniseringsquiz

Testa din förståelse för hur text delas upp i tokens och varför det påverkar kostnader, sammanhangsgränser och modellbeteende.

Relaterade ledstråkTokenisering
Fråga 1 av 6

Vad är en "token" i sammanhanget av en språkmodell?