AI لغت کی اصطلاح

پیرامیٹر سے موثر فائن ٹیوننگ (PEFT) کیا ہے؟

تعریف

وہ طریقے جو شامل کردہ پیرامیٹرز کے چھوٹے ذیلی سیٹ کو تربیت دے کر ماڈلز کو اپناتے ہیں۔

مکمل AI لغت براؤز کریں۔تمام مفت AI گائیڈز دریافت کریں۔

متعلقہ شرائط

فائن ٹیوننگپہلے سے تربیت یافتہ ماڈل کو مخصوص کام کے لیے ڈھالنے کے لیے ڈومین کے مخصوص ڈیٹا پر تربیت جاری رکھنا۔LoRA (کم درجہ کی موافقت)پیرامیٹر سے موثر فائن ٹیوننگ کا طریقہ جو کم درجے کے اڈاپٹر میٹرکس کو شامل کرتا ہے۔بعد از تربیتپہلے سے تربیت کے بعد تربیتی اقدامات کا اطلاق ہوتا ہے، جیسے کہ انسٹرکشن ٹیوننگ، ترجیحی اصلاح، اور حفاظتی ٹیوننگ۔انسٹرکشن ٹیوننگمندرجہ ذیل کام کو بہتر بنانے کے لیے انسٹرکشن رسپانس جوڑوں پر ماڈل کو ٹھیک کرنا۔سیکھنے کی شرحایک تربیتی ہائپر پیرامیٹر یہ کنٹرول کرتا ہے کہ ہر اپ ڈیٹ کے مرحلے میں کتنے پیرامیٹرز تبدیل ہوتے ہیں۔ڈی پی او (براہ راست ترجیحی اصلاح)ایک تربیتی طریقہ جو ماڈلز کو براہ راست ترجیحی جوڑوں پر بناتا ہے بغیر کسی علیحدہ انعامی ماڈل کی ضرورت کے۔

ہماری مفت گائیڈز میں مزید جانیں۔

Fine-TuningHard Parameter Sharing in Multi-Task NetworksGumbel-Softmax and ReparameterizationRejection Sampling Fine-Tuning

یہ بھی دیکھیں

ParameterPerplexityOverfittingPipelineOpen-Source ModelPrecisionOCR (Optical Character Recognition)Pretraining