ما هو LoRA (التكيف ذو الرتبة المنخفضة)؟ التعريف | AI Understanding

التعريف

طريقة ضبط دقيقة ذات كفاءة في المعلمات تضيف مصفوفات محولات ذات رتبة منخفضة.

المصطلحات ذات الصلة

الضبط الدقيق ذو كفاءة المعلمة (PEFT)

الطرق التي تعمل على تكييف النماذج من خلال تدريب مجموعة فرعية صغيرة من المعلمات المضافة.

تقنية ضبط دقيقة تجمع بين تكميم الوزن 4 بت مع محولات LoRA لتقليل احتياجات الذاكرة.

ضبط دقيق

مواصلة التدريب على البيانات الخاصة بالمجال لتكييف نموذج تم تدريبه مسبقًا مع مهمة محددة.

ضبط التعليمات

ضبط نموذج على أزواج التعليمات والاستجابة لتحسين متابعة المهام.

DPO (تحسين التفضيلات المباشرة)

طريقة تدريب تعمل على ضبط النماذج مباشرة على أزواج التفضيلات دون الحاجة إلى نموذج مكافأة منفصل.

تجانس التسمية

طريقة تنظيم تعمل على تخفيف التسميات الصعبة لتحسين التعميم.

تعرف على المزيد في أدلةنا المجانية

AI Workflow Automation Barlow Twins and Redundancy Reduction Domain Adaptation Kubeflow and ML Pipeline Orchestration

انظر أيضا

Learning Rate Loss Function Large Language Model (LLM)Machine Learning (ML)Latency Memory (Agent Memory)Mixture of Experts (MoE)Knowledge Graph

تصفح قاموس الذكاء الاصطناعي الكامل استكشف جميع أدلة الذكاء الاصطناعي المجانية