引導式測驗 · 中等 等級

CLIP 與視覺語言模式測驗

查看 CLIP 的共享表示和對比配對,包括零樣本標籤、原始編碼器系列、批次分數計數和 unCLIP。

相關引導路徑剪輯和視覺語言模型
問題 1 的 8

CLIP背後的核心思想是什麼?

預覽每個問題8 問題

當您參加測驗時,就會出現答案和解釋。

  1. CLIP背後的核心思想是什麼?
    • 將圖片壓縮成更小的文件
    • 將圖像和文字放置到同一共享嵌入空間中
    • 從照片產生 3D 模型
    • 將語音翻譯成文本
  2. CLIP 使用什麼訓練方法?
    • 從人類回饋中強化學習
    • 手動標記每張影像中的每個對象
    • 將匹配的圖像-文字對放在一起的對比學習
    • 從語音模型複製權重
  3. 零樣本分類在原始 CLIP 傳輸設定中意味著什麼?
    • Using text-defined candidate categories without new task-specific supervised classifier fitting
    • Using a model that never received any pretraining data
    • Running without any computation or electricity
    • A guarantee that every category is classified correctly
  4. CLIP 如何衡量圖像和標題是否匹配?
    • 按檔案大小比較
    • 透過計算每種顏色的像素
    • 透過檢查影像的時間戳
    • 透過向量之間的餘弦相似度
  5. CLIP 大約使用了多少資料進行訓練?
    • 數千張手工標記的圖像
    • 只有文字,沒有圖像
    • 來自網路的大約 4 億個圖像文字對
    • 單一策劃的博物館藏品
  6. How does the cited unCLIP image-generation paper use CLIP representations?
    • The original standalone CLIP encoder directly outputs every image pixel
    • A prior supplies CLIP image embeddings to a generative decoder
    • It removes all image representations and uses only filenames
    • It uses CLIP only as a network-encryption protocol
  7. Which image-encoder families were evaluated in the original CLIP paper?
    • Only recurrent text encoders
    • Only a mandatory linear pixel average
    • Only a raw audio codec
    • Modified ResNets and Vision Transformers
  8. A CLIP batch contains 32 paired images and texts. How many entries are in its full cross-modal score matrix?
    • 1024
    • 32
    • 64
    • 992