Глоссарий терминов искусственного интеллекта

Что такое LoRA (Адаптация низкого ранга)?

Определение

Метод точной настройки с эффективным параметром, который добавляет матрицы адаптеров низкого ранга.

Просмотрите полный глоссарий AIИзучите все бесплатные руководства по искусственному интеллекту

Связанные термины

Точная настройка с эффективным использованием параметров (PEFT)Методы, которые адаптируют модели путем обучения небольшого подмножества добавленных параметров.QLoRAМетод тонкой настройки, сочетающий 4-битное весовое квантование с адаптерами LoRA для уменьшения потребности в памяти.Точная настройкаПродолжение обучения на предметных данных для адаптации предварительно обученной модели к конкретной задаче.Инструкция по настройкеТочная настройка модели на парах инструкция-ответ для улучшения выполнения задач.DPO (прямая оптимизация предпочтений)Метод обучения, который настраивает модели непосредственно на парах предпочтений без необходимости использования отдельной модели вознаграждения.Сглаживание метокМетод регуляризации, который смягчает жесткие метки для улучшения обобщения.

Узнайте больше в наших бесплатных руководствах.

AI Workflow AutomationBarlow Twins and Redundancy ReductionDomain AdaptationKubeflow and ML Pipeline Orchestration

См. также

Learning RateLoss FunctionLarge Language Model (LLM)Machine Learning (ML)LatencyMemory (Agent Memory)Mixture of Experts (MoE)Knowledge Graph