نزول التدرج العشوائي مع مسابقة الزخم

تظهر الإجابات والتفسيرات أثناء إجراء الاختبار.

1. ماذا يتراكم مصطلح الزخم أثناء التدريب؟
   • إجمالي عدد فترات التدريب
   • متوسط تشغيل (مرجح بشكل كبير) للتدرجات السابقة
   • حجم مجموعة البيانات
   • تاريخ دقة النموذج
2. في واد طويل وضيق، ما هي المشكلة التي يعاني منها SGD العادي والتي يساعد الزخم في حلها؟
   • يفيض عدديا
   • يتوقف عن حساب التدرجات
   • فهو يزيد من معدل التعلم تلقائيا
   • إنه يتعرج عبر الجدران شديدة الانحدار بينما يتقدم ببطء على طول الأرض
3. القيمة الافتراضية الشائعة لمعامل الزخم هي:
   • 0.9
   • 0.0
   • 0.5
   • 2.0
4. ما التشبيه الفيزيائي الذي يُستخدم غالبًا لوصف الزخم؟
   • البندول يتأرجح إلى الأبد
   • ربيع العض مرة أخرى
   • كرة ثقيلة تتدحرج إلى أسفل
   • تجميد الماء
5. ما مقدار الزخم تقريبًا الذي يضخم الخطوة الفعالة في اتجاه ثابت عندما تكون قيمة بيتا = 0.9؟
   • حوالي 2 مرات
   • حوالي 0.1 مرة
   • لا تضخيم
   • حوالي 10 مرات
6. أي مُحسِّن حديث يشتمل على تقدير اللحظة الأولى بنمط الزخم؟
   • طريقة نيوتن
   • آدم
   • وسائل K
   • بحث عشوائي
7. In the update v = beta times v plus gradient, what happens when beta is zero?
   • The old velocity is doubled
   • Every gradient becomes zero
   • The previous velocity is discarded and the current gradient determines the step
   • The parameters stop depending on the learning rate
8. Why can repeated gradients with opposing sideways directions produce less zig-zagging under momentum?
   • Their opposing contributions can partially cancel in accumulated velocity
   • All past gradients are stored as separate parameters
   • The loss becomes convex automatically
   • Momentum ignores the current gradient entirely