تعلّم الأخبار الأدوات وظائف المهمة

مصطلح مسرد الذكاء الاصطناعي

ما هو كلورا؟

التعريف

تقنية ضبط دقيقة تجمع بين تكميم الوزن 4 بت مع محولات LoRA لتقليل احتياجات الذاكرة.

تصفح قاموس الذكاء الاصطناعي الكامل استكشف جميع أدلة الذكاء الاصطناعي المجانية

LoRA (التكيف ذو الرتبة المنخفضة)طريقة ضبط دقيقة ذات كفاءة في المعلمات تضيف مصفوفات محولات ذات رتبة منخفضة.التكميمتحويل أوزان النماذج إلى تنسيقات ذات دقة أقل مثل 8 بت أو 4 بت.ضبط دقيقمواصلة التدريب على البيانات الخاصة بالمجال لتكييف نموذج تم تدريبه مسبقًا مع مهمة محددة.ضبط التعليماتضبط نموذج على أزواج التعليمات والاستجابة لتحسين متابعة المهام.التكميم النموذجيتقليل الدقة الرقمية لأوزان النموذج لتقليل تكلفة الذاكرة والاستدلال.الضبط الدقيق ذو كفاءة المعلمة (PEFT)الطرق التي تعمل على تكييف النماذج من خلال تدريب مجموعة فرعية صغيرة من المعلمات المضافة.

تعرف على المزيد في أدلةنا المجانية

QLoRA and 4-Bit Fine-Tuning

انظر أيضا

DPO (Direct Preference Optimization)Flash Attention Tree of Thoughts Multi-Head Attention ReAct Positional Encoding Agentic Loop RoPE (Rotary Positional Embeddings)