Bài kiểm tra có liên kết hướng dẫn · Trung bình Cấp độ
Bài kiểm tra về điểm CLIP và mức độ ưa thích của con người
Kiểm tra cách điểm CLIP đo lường sự căn chỉnh nhanh chóng, cách đào tạo các mô hình ưu tiên như PickScore và ImageReward và vị trí mỗi số liệu không thành công.
Câu hỏi 1 của 8
Tại sao chỉ riêng FID là không đủ để đánh giá các mô hình chuyển văn bản thành hình ảnh?
Xem trước mọi câu hỏi8 câu hỏi
Câu trả lời và giải thích xuất hiện khi bạn làm bài kiểm tra.
- Tại sao chỉ riêng FID là không đủ để đánh giá các mô hình chuyển văn bản thành hình ảnh?
- It requires human annotators for every image
- It never looks at the prompt, so it cannot measure text alignment
- Nó chỉ hoạt động trên hình ảnh đen trắng
- It measures CLIP similarity instead of realism
- Điểm CLIP cơ bản được tính như thế nào?
- By counting pixels that match the prompt's colors
- By training a discriminator on the generated images
- By averaging Inception features across a dataset
- By taking the cosine similarity between CLIP's image and text embeddings
- PickScore đã đào tạo tập dữ liệu nào?
- Pick-a-Pic, a set of choices made by users of a web app
- COCO captions only
- ImageNet class labels
- A collection of FID statistics
- Điểm yếu nào là điển hình của việc tính điểm dựa trên CLIP?
- It cannot process color images
- It always penalizes photorealism
- It often misses counts, spatial relations and which attribute belongs to which object
- It requires prompts shorter than five words
- Tại sao không thể so sánh trực tiếp điểm CLIP từ các đường trục khác nhau?
- All backbones produce identical scores, so there is nothing to compare
- Different encoders such as ViT-B/32 and ViT-L/14 have different embedding spaces and score ranges
- CLIP score is only defined for one backbone
- Backbones only affect FID, not CLIP score
- What risk arises when a model is optimized directly against a preference score?
- The score becomes impossible to compute
- The model loses the ability to read prompts
- It may learn to please the scorer, for example with oversaturated images, rather than people
- FID automatically improves
- What typically happens to the part of a prompt beyond CLIP's 77-token limit?
- It is scored separately and averaged in
- The encoder expands its context window automatically
- It is summarized into fewer tokens first
- It is truncated, so it never affects the score
- Which kind of evaluation checks whether each object and attribute in a prompt actually appears?
- Question-answering or detector-based benchmarks such as TIFA and GenEval
- FID
- Raw CLIP cosine similarity
- Raising the guidance scale