Bài kiểm tra có liên kết hướng dẫn · Trung bình Cấp độ
Câu đố giả thuyết về vé số
Kiểm tra hiểu biết của bạn về vé số, khởi tạo, cắt tỉa và giới hạn của các khiếu nại về mạng lưới thần kinh thưa thớt.
Câu hỏi 1 của 8
'Tấm vé trúng thưởng' trong giả thuyết này là gì?
Xem trước mọi câu hỏi8 câu hỏi
Câu trả lời và giải thích xuất hiện khi bạn làm bài kiểm tra.
- 'Tấm vé trúng thưởng' trong giả thuyết này là gì?
- Một mạng con thưa thớt được đào tạo từ init ban đầu của nó phù hợp với mạng đầy đủ
- Một mạng có nhiều tham số hơn bình thường
- Một mô hình được đào tạo trước được tải xuống từ internet
- Một tập hợp các siêu tham số được đoán ngẫu nhiên
- In the original lottery-ticket experiments, what was paired with the discovered sparse mask when retraining a ticket?
- Fresh random values for every surviving weight
- The surviving weights’ matched original initialization
- A different architecture for each pruning round
- The final trained weights with no resetting
- Ai đề xuất giả thuyết vé số?
- Bạn Tốt (2014)
- Krizhevsky, Sutskever, Hinton (2012)
- Frankle và Carbin (2018)
- Bạc và đồng nghiệp (2016)
- Which procedure did the original Lottery Ticket Hypothesis paper use to identify winning tickets?
- Randomly remove a fixed half of all weights once
- Iterative magnitude pruning with a reset to the original initialization
- Add dropout after each pruning round
- Increase the learning rate after every epoch
- How should the idea that overparameterization helps optimization find a trainable sparse structure be described?
- A conjecture or proposed explanation, not a result established by the original experiments
- A theorem proven for every neural-network architecture
- A guarantee that all weights can be removed without loss
- A claim that pruning eliminates the need for training data
- What does a strong lottery-ticket result claim in its theoretical setting?
- Every randomly initialized network already solves any task
- A sufficiently overparameterized randomly initialized network can contain a pruned subnetwork that approximates a target without further weight training
- Pruning always preserves the trained model’s accuracy
- A sparse network never needs data
- What does iterative magnitude pruning remove at each pruning step?
- The training examples with the lowest labels
- The neurons with the most outgoing connections
- Weights with the smallest magnitudes
- All weights in the final layer
- Which datasets were used in the original paper’s reported lottery-ticket experiments?
- ImageNet and COCO only
- LibriSpeech and Common Voice
- SQuAD and GLUE
- MNIST and CIFAR-10