Тест із лемматизації та визначення коренів

Відповіді та пояснення з’являються під час виконання тесту.

1. Яка головна відмінність між основою та лематизацією?
   • Визначення кореня використовує грубі правила видалення суфіксів, тоді як лемматизація відображає слова на реальні базові форми словника
   • Stemming використовує словники; лематизація використовує правила
   • Це ідентичні процеси
   • Stemming працює лише з числами
2. Що може вивести Porter stemmer для слова «studies»?
   • вивчення
   • студ
   • вивчав
   • студент
3. When 'better' is used as a comparative adjective, which lemma may a lemmatizer return?
   • Betterness
   • Bet
   • Good
   • Wellness
4. Чому лемматизатору часто потрібна інформація про частину мови?
   • Порахувати букви
   • Для перекладу слова
   • Написати слово з великої літери
   • Щоб вибрати правильну лему, оскільки однаковий варіант написання може бути іменником або дієсловом
5. Що загалом є ПРАВИЛЬНИМ щодо коріння порівняно з лематизацією?
   • Стемінг швидший, але менш точний
   • Стемінг повільніший і точніший
   • Створення коренів завжди створює словникові слова
   • Stemming вимагає WordNet
6. Яку практичну користь мають обидві методики?
   • Вони перекладають текст
   • Вони зменшують розмір словника шляхом злиття варіантів слів
   • Вони додають нові слова
   • Вони шифрують текст
7. What does byte-pair encoding do when constructing subword units?
   • It strips every suffix using a fixed Porter rule
   • It assigns every word a single pronunciation
   • It iteratively merges frequent adjacent symbols into larger units
   • It replaces all tokens with part-of-speech labels
8. Why should stemming or lemmatization tools be checked separately for different languages?
   • Every language uses the same suffix rules
   • Lemmatizers can process only English verbs
   • Stemming produces identical output for every script
   • Morphology and useful normalization rules vary by language