اختبار مرتبط بالدليل · متوسط المستوى
الاستيفاء الموضعي لاختبار امتداد السياق
اختبار ضغط موضع RoPE، التوسع، عوامل التمديد، الأساليب المدركة للتردد، تكيف النموذج، وتكاليف الموارد للسياق الطويل.
سؤال 1 من 8
ما هي الفكرة الأساسية للاستيفاء الموقف؟
معاينة كل سؤال8 أسئلة
تظهر الإجابات والتفسيرات أثناء إجراء الاختبار.
- ما هي الفكرة الأساسية للاستيفاء الموقف؟
- أضف المزيد من رؤوس الاهتمام
- قم بإعادة قياس (تقليص) مؤشرات المواضع بحيث تظل ضمن النطاق المُدرب بدلاً من الاستقراء
- حذف التضمينات الموضعية بالكامل
- إعادة تدريب النموذج من الصفر على تسلسلات طويلة
- Which positional scheme did the original Position Interpolation work extend through position-index rescaling?
- A fixed output-vocabulary lookup table only
- No positional information of any kind
- Rotary positional embeddings, or RoPE
- An image compression format rather than model positions
- Why can unmodified positional extrapolation degrade a RoPE model on much longer inputs?
- The sequence introduces positional and attention conditions beyond the model's training experience
- A longer context automatically retrains every parameter
- RoPE removes all attention from the model
- The tokenizer necessarily loses its vocabulary at a specific length
- في حالة تمديد طول السياق من L إلى L'، ما هو عامل إعادة القياس الذي ينطبق عليه PI الأساسي على الموضع m؟
- اضرب م في L'/L
- أضف L' إلى م
- اضبط م على الصفر
- قسّم م على L'/L (أي م / (L'/L))
- How does YaRN's frequency-aware approach differ from uniform Position Interpolation?
- It removes every query and key from attention
- It changes only the output vocabulary size
- It treats frequency bands differently to preserve local detail while extending positional range
- It guarantees that all long-context tasks have identical accuracy
- What makes the original Position Interpolation workflow different from pretraining a new long-context model from scratch?
- It eliminates every need for computation
- It adapts an existing pretrained model toward the tested longer window with rescaling and fine-tuning
- It requires replacing all learned parameters with random values
- It proves all models can extend indefinitely without evaluation
- Does basic Position Interpolation inherently add new attention heads or enlarge the trainable architecture?
- Yes; every doubled context requires twice as many attention heads
- Yes; the vocabulary must expand by the context-length factor
- Only the model's filename changes, with no effect on positions
- No; it changes the position coordinates used by the existing model
- Why must a longer-context PI deployment still assess memory and computation requirements?
- It processes more tokens and stores relevant state; compressing position coordinates does not remove that work
- The number of actual input tokens shrinks automatically with their positions
- All KV-cache storage becomes zero after rescaling
- Every extended model has unchanged latency regardless of input length