引導式測驗 · 中等 等級

Word2Vec Skip-Gram 和 CBOW 測驗

比較 Word2Vec 的 CBOW 和 Skip-Gram 目標、負採樣、學習向量以及影響稀有字詞訓練的選擇。

問題 1 的 8

Skip-Gram 架構預測什麼?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. Skip-Gram 架構預測什麼?
    • 圍繞中心詞的上下文詞
    • 周圍上下文單字中的中心詞
    • 文檔中的下一句話
    • 每個單字的詞性標記
  2. 訓練 Word2Vec 模型的實際有用輸出是什麼?
    • 上下文詞的預測準確率
    • 學習到的權重矩陣,其行是詞向量
    • 句子的解析樹
    • 每個文檔類別的機率
  3. 為什麼Word2Vec使用負採樣?
    • 增加詞彙量
    • 在語言之間進行翻譯
    • 避免整個詞彙表上昂貴的完整 softmax
    • 自動刪除停用詞
  4. What does subsampling frequent words do in the later Word2Vec training method?
    • It reduces the influence of very frequent words and can speed training
    • It turns every word into a character n-gram
    • It changes CBOW into a sentence classifier
    • It guarantees better vectors for every rare word
  5. 「國王 - 男人 + 女人 ≈ 女王」說明了 Word2Vec 向量的哪些著名屬性?
    • 透過線性算術進行向量類比
    • 精確字典查找
    • 語法錯誤糾正
    • 句子長度標準化
  6. 誰在哪一年引進了 Word2Vec?
    • 傑弗裡·辛頓 (Geoffrey Hinton) 在多倫多,2006 年
    • Tomas Mikolov 及其同事在 Google,2013 年
    • Yann LeCun,貝爾實驗室,1998
    • OpenAI,2018
  7. What does the CBOW architecture predict from its input context?
    • Each future paragraph in the document
    • The sentiment label of the full corpus
    • The center word surrounded by the context window
    • The spelling of a character n-gram
  8. What distribution does the original Word2Vec paper use to draw negative samples?
    • A uniform distribution over all character n-grams
    • A distribution based only on word length
    • A distribution proportional to squared inverse frequency
    • A unigram word-frequency distribution raised to the 0.75 power