AGI (Общий искусственный интеллект)
Гипотетическая система искусственного интеллекта, способная выполнять большинство интеллектуальных задач на человеческом уровне во многих областях.
Справочный термин ИИ
Глоссарий ИИ
Основная техническая терминология объяснена на высочайшем уровне ясности. Предназначен для исследователей, студентов и гуманитарно-ориентированного образования.
Показаны 213 соответствие терминов.
ИИ-агент
Программная система, которая может наблюдать, рассуждать и предпринимать действия для достижения цели, часто используя инструменты и память.
Справочный термин ИИ
Выравнивание ИИ
Работа по обеспечению поведения систем ИИ в соответствии с человеческими намерениями, ценностями и ограничениями безопасности.
Справочный термин ИИ
Управление ИИ
Политика, стандарты и механизмы надзора, которые определяют, как ИИ разрабатывается и используется в обществе.
Справочный термин ИИ
Безопасность ИИ
Область, ориентированная на снижение вредного поведения, сбоев и рисков неправильного использования в системах искусственного интеллекта.
Справочный термин ИИ
Алгоритм
Определенный набор правил или шагов, которым следует компьютер для решения проблемы или выполнения задачи.
Справочный термин ИИ
Алгоритмическое смещение
Систематическая несправедливость в результатах модели, вызванная искажением данных, предположениями или выбором моделирования.
Справочный термин ИИ
Алгоритмическая прозрачность
Насколько четко документированы и понятны логика, источники данных и ограничения системы ИИ.
Справочный термин ИИ
Аннотация
Добавленные человеком метки или метаданные, используемые для обучения или оценки моделей машинного обучения.
Справочный термин ИИ
API (интерфейс прикладного программирования)
Структурированный способ отправки одной программной системой запросов и получения ответов от другой системы.
Справочный термин ИИ
Искусственный интеллект (ИИ)
Широкая область создания систем, выполняющих задачи, требующие распознавания образов, рассуждения, языка или принятия решений.
Справочный термин ИИ
Механизм внимания
Компонент модели, который динамически фокусируется на соответствующих частях входных данных при создании выходных данных.
Справочный термин ИИ
Автономная система
Система, которая может принимать решения и действовать под ограниченным или отсутствующим прямым контролем человека в режиме реального времени.
Справочный термин ИИ
Обратное распространение ошибки
Основной алгоритм обучения, который обновляет веса модели путем распространения ошибок прогнозирования обратно по сети.
Справочный термин ИИ
Базовая модель
Простая эталонная модель, используемая для сравнения того, действительно ли более сложные подходы улучшают результаты.
Справочный термин ИИ
Контрольный показатель
Стандартизированный тест или набор данных, используемый для измерения и сравнения производительности модели.
Справочный термин ИИ
Предвзятость
Постоянная модель ошибок или несправедливости в данных или поведении модели.
Справочный термин ИИ
Большие данные
Очень большие и сложные наборы данных, требующие масштабируемых методов хранения и обработки.
Справочный термин ИИ
Модель черного ящика
Модель, внутренние рассуждения которой людям трудно интерпретировать напрямую.
Справочный термин ИИ
Калибровка
Насколько хорошо показатели достоверности модели соответствуют фактическим вероятностям правильности.
Справочный термин ИИ
Цепочка мыслей
Стиль рассуждения, при котором модель ИИ разлагает проблему на промежуточные этапы.
Справочный термин ИИ
Классификация
Задача, в которой модель присваивает входные данные одной или нескольким предопределенным категориям.
Справочный термин ИИ
Классификатор
Модель, разработанная специально для задач классификации.
Справочный термин ИИ
КЛИП
Архитектура мультимодальной модели, которая изучает общие представления текста и изображений.
Справочный термин ИИ
Вычислить
Ресурсы обработки, необходимые для обучения и запуска моделей, часто измеряются в FLOPS или часах графического процессора.
Справочный термин ИИ
Компьютерное зрение
Раздел искусственного интеллекта, который извлекает смысл из изображений и видео.
Справочный термин ИИ
Контекстное окно
Максимальное количество входных токенов, которые языковая модель может обработать одновременно.
Справочный термин ИИ
Постоянное обучение
Подходы к обучению, которые позволяют модели продолжать обучение на новых данных, не забывая при этом предыдущие знания.
Справочный термин ИИ
Сверточная нейронная сеть (CNN)
Нейронная архитектура, оптимизированная для обработки данных в виде сетки, таких как изображения.
Справочный термин ИИ
Перекрестная энтропийная потеря
Общая целевая функция, используемая для обучения моделей классификации путем наказания неправильных вероятностей.
Справочный термин ИИ
Увеличение данных
Методы создания модифицированных обучающих примеров для улучшения обобщения модели.
Справочный термин ИИ
Дрейф данных
Изменение реальных входных данных с течением времени, которое может ухудшить производительность модели.
Справочный термин ИИ
Маркировка данных
Процесс назначения тегов или целевых результатов необработанным данным для контролируемого обучения.
Справочный термин ИИ
Набор данных
Коллекция структурированных или неструктурированных примеров, используемых для обучения, проверки или тестирования.
Справочный термин ИИ
Граница решения
Поверхность в пространстве признаков, разделяющая классы, предсказанные классификатором.
Справочный термин ИИ
Дерево решений
Модель, которая делает прогнозы с помощью последовательности разделений признаков «если-то».
Справочный термин ИИ
Глубокое обучение
Подмножество машинного обучения, которое использует многослойные нейронные сети для обучения представлению.
Справочный термин ИИ
Диффузионная модель
Генеративная архитектура, которая учится обращать шум для синтеза изображений, звука или другого контента.
Справочный термин ИИ
Дистилляция
Сжатие знаний из большой модели учителя в меньшую модель ученика.
Справочный термин ИИ
Адаптация домена
Методы, которые позволяют модели, обученной в одной области, работать лучше в другой области.
Справочный термин ИИ
Встраивание
Числовое векторное представление, которое отражает семантическое значение текста, изображений или других данных.
Справочный термин ИИ
Кодер
Компонент модели, который преобразует входные данные в скрытые представления.
Справочный термин ИИ
Ансамбль
Объединение прогнозов из нескольких моделей для повышения надежности или точности.
Справочный термин ИИ
Оценочный набор
Отложенный набор данных, используемый для измерения качества модели после обучения.
Справочный термин ИИ
Объясняемость
Степень, в которой поведение модели можно интерпретировать и объяснить людям.
Справочный термин ИИ
Ложноотрицательный результат
Неверный прогноз, когда модель пропускает действительно положительный случай.
Справочный термин ИИ
Ложное срабатывание
Неверный прогноз, когда модель ошибочно помечает отрицательный случай как положительный.
Справочный термин ИИ
Особенность
Входная переменная, используемая моделью для прогнозирования.
Справочный термин ИИ
Особенности проектирования
Разработка или преобразование входных переменных, чтобы сделать обучение более простым и эффективным.
Справочный термин ИИ
Извлечение функций
Преобразование необработанных данных в информативные функции, которые может использовать модель.
Справочный термин ИИ
Обучение в несколько этапов
Обучение или адаптация поведения лишь на небольшом количестве примеров.
Справочный термин ИИ
Точная настройка
Продолжение обучения на предметных данных для адаптации предварительно обученной модели к конкретной задаче.
Справочный термин ИИ
Модель фундамента
Большая предварительно обученная модель, которую можно адаптировать для многих последующих задач.
Справочный термин ИИ
Вызов функции
Возможность модели генерировать структурированные вызовы, которые запускают внешние инструменты или API.
Справочный термин ИИ
GAN (генеративно-состязательная сеть)
Генеративная установка, в которой генератор и дискриминатор тренируются друг против друга.
Справочный термин ИИ
Обобщение
Насколько хорошо модель работает с новыми, невидимыми данными за пределами обучающего набора.
Справочный термин ИИ
Генеративный ИИ
Системы искусственного интеллекта, которые создают новый контент, такой как текст, изображения, аудио, видео или код.
Справочный термин ИИ
Градиент
Вектор, показывающий, насколько должен измениться каждый параметр, чтобы уменьшить потери.
Справочный термин ИИ
Градиентный спуск
Метод оптимизации, который обновляет параметры в направлении, уменьшающем ошибку.
Справочный термин ИИ
Основная истина
Доверенные ссылочные метки, используемые для обучения или оценки результатов модели.
Справочный термин ИИ
Ограждения
Правила, проверки и элементы управления, которые ограничивают небезопасное или нежелательное поведение модели.
Справочный термин ИИ
Галлюцинация
Когда модель генерирует беглую, но ложную или неподтвержденную информацию.
Справочный термин ИИ
Человек в курсе
Рабочий процесс, в котором люди проверяют, направляют или игнорируют результаты ИИ.
Справочный термин ИИ
Гиперпараметр
Значение конфигурации, установленное перед обучением, например скорость обучения, размер пакета или глубина.
Справочный термин ИИ
Контекстное обучение
Способность модели следовать шаблонам из примеров, представленных непосредственно в подсказке.
Справочный термин ИИ
Вывод
Фаза выполнения, на которой обученная модель генерирует прогнозы или выходные данные.
Справочный термин ИИ
Вычисление времени вывода
Количество вычислительной мощности, потребляемой при создании каждого ответа.
Справочный термин ИИ
Инструкция по настройке
Точная настройка модели на парах инструкция-ответ для улучшения выполнения задач.
Справочный термин ИИ
Классификация намерений
Прогнозирование цели пользователя на основе текстового запроса для его правильной маршрутизации.
Справочный термин ИИ
побег из тюрьмы
Быстрый метод, предназначенный для обхода ограничений безопасности модели.
Справочный термин ИИ
Прекращение знаний
Последний момент времени отражается в данных обучения модели.
Справочный термин ИИ
Дистилляция знаний
Обучение меньшей модели имитации результатов более крупной модели.
Справочный термин ИИ
График знаний
Графическая структура сущностей и отношений, используемая для рассуждений или поиска.
Справочный термин ИИ
Сглаживание меток
Метод регуляризации, который смягчает жесткие метки для улучшения обобщения.
Справочный термин ИИ
Задержка
Время между отправкой запроса и получением выходных данных модели.
Справочный термин ИИ
Модель большого языка (LLM)
Языковая модель, обученная на массивных текстовых корпусах для генерации и анализа текста.
Справочный термин ИИ
Скорость обучения
Обучающий гиперпараметр, контролирующий, насколько параметры изменяются на каждом этапе обновления.
Справочный термин ИИ
LoRA (Адаптация низкого ранга)
Метод точной настройки с эффективным параметром, который добавляет матрицы адаптеров низкого ранга.
Справочный термин ИИ
Функция потерь
Математическая цель, позволяющая количественно оценить ошибку прогноза во время обучения.
Справочный термин ИИ
Машинное обучение (МО)
Методы, которые позволяют системам изучать закономерности на основе данных и совершенствоваться с течением времени.
Справочный термин ИИ
Память (Память агента)
Сохраненный контекст, который агент ИИ использует на этапах или сеансах для улучшения непрерывности.
Справочный термин ИИ
Смесь экспертов (МО)
Архитектура со специализированными подсетями, в которых на каждом входе работают только избранные эксперты.
Справочный термин ИИ
Модель карты
Документация, описывающая предполагаемое использование модели, показатели, ограничения и риски.
Справочный термин ИИ
Модель Дрифта
Снижение производительности со временем, поскольку реальные условия отличаются от предположений обучения.
Справочный термин ИИ
Квантование модели
Снижение числовой точности весов модели для уменьшения затрат на память и логические выводы.
Справочный термин ИИ
Мультимодальная модель
Модель, которая может обрабатывать или генерировать несколько типов данных, таких как текст, изображение и аудио.
Справочный термин ИИ
Распознавание именованных объектов (NER)
Задача НЛП, которая идентифицирует такие сущности, как люди, места, даты или организации.
Справочный термин ИИ
Обработка естественного языка (НЛП)
Отрасль искусственного интеллекта сосредоточена на понимании и создании человеческого языка.
Справочный термин ИИ
Нейронная сеть
Многоуровневая вычислительная модель, вдохновленная биологическими нейронами и синапсами.
Справочный термин ИИ
Нормализация
Преобразование значений в согласованный масштаб для повышения стабильности оптимизации.
Справочный термин ИИ
OCR (оптическое распознавание символов)
Технология, которая преобразует текст на изображениях или отсканированных изображениях в машиночитаемый текст.
Справочный термин ИИ
Модель с открытым исходным кодом
Модель выпущена с общедоступными весами или кодом для проверки, адаптации и повторного использования.
Справочный термин ИИ
Переобучение
Когда модель запоминает обучающие данные и плохо работает с невидимыми входными данными.
Справочный термин ИИ
Параметр
Изученный вес внутри модели, который влияет на ее выходные данные.
Справочный термин ИИ
Точная настройка с эффективным использованием параметров (PEFT)
Методы, которые адаптируют модели путем обучения небольшого подмножества добавленных параметров.
Справочный термин ИИ
Perplexity
Метрика языковой модели, измеряющая, насколько модель удивлена истинными следующими токенами.
Справочный термин ИИ
Трубопровод
Упорядоченный рабочий процесс предварительной обработки, этапов модели и этапов постобработки.
Справочный термин ИИ
Точность
Доля прогнозируемых положительных результатов, которые на самом деле верны.
Справочный термин ИИ
Предварительная подготовка
Первоначальное обучение крупномасштабной модели на обширных данных перед последующей адаптацией.
Справочный термин ИИ
Подскажите
Входные инструкции и контекст, предоставленные генеративной модели.
Справочный термин ИИ
Оперативное проектирование
Проектирование подсказок по повышению качества продукции, надежности и управляемости.
Справочный термин ИИ
Быстрая инъекция
Схема атаки, при которой вредоносные инструкции вставляются во входные данные модели или извлекаемый контент.
Справочный термин ИИ
обрезка
Удаление менее важных весов модели или нейронов для уменьшения размера и объема вычислений.
Справочный термин ИИ
Квантование
Преобразование весов модели в форматы более низкой точности, например 8-битные или 4-битные.
Справочный термин ИИ
RAG (генерация с расширенным поиском)
Метод, который извлекает внешние знания и вводит их в генерацию во время вывода.
Справочный термин ИИ
Напомним
Доля фактических положительных результатов, которые модель правильно идентифицирует.
Справочный термин ИИ
Система рекомендаций
Конвейер моделей, который прогнозирует предпочтения пользователей при ранжировании контента или продуктов.
Справочный термин ИИ
Красная команда
Стресс-тестирование системы ИИ с состязательными подсказками для выявления сбоев и рисков.
Справочный термин ИИ
Обучение с подкреплением
Обучение с помощью сигналов вознаграждения, когда агент учится действиям, которые максимизируют долгосрочную отдачу.
Справочный термин ИИ
Обучение с подкреплением на основе обратной связи с человеком (RLHF)
Метод обучения, который использует сигналы человеческих предпочтений для формирования поведения модели.
Справочный термин ИИ
Поиск
Поиск соответствующих документов или записей из источника знаний для запроса.
Справочный термин ИИ
Модель вознаграждения
Модель, которая оценивает выходные данные на основе сигналов предпочтений, часто используется в конвейерах RLHF.
Справочный термин ИИ
Надежность
Способность модели сохранять производительность в условиях шума, сдвигов или враждебных воздействий.
Справочный термин ИИ
Предохранительный фильтр
Уровень модерации, который блокирует или перезаписывает небезопасные входные или выходные данные модели.
Справочный термин ИИ
Закон масштабирования
Эмпирическая зависимость, показывающая, как производительность повышается с увеличением размера модели, данных или вычислений.
Справочный термин ИИ
Семантический поиск
Поиск, который соответствует значению, а не точному совпадению ключевых слов, часто с использованием встраивания.
Справочный термин ИИ
Самостоятельное обучение
Изучение представлений на основе немаркированных данных путем прогнозирования замаскированных или преобразованных частей.
Справочный термин ИИ
Анализ настроений
Задача НЛП, которая классифицирует эмоциональный тон или мнение в тексте.
Справочный термин ИИ
Модель малого языка (SLM)
Компактная языковая модель, оптимизированная для снижения задержки, затрат и использования на устройстве.
Справочный термин ИИ
Разреженная модель
Модель, в которой многие параметры равны нулю или неактивны для сокращения вычислений.
Справочный термин ИИ
Контролируемое обучение
Обучение модели с помощью размеченных примеров, которые сопоставляют входные данные с известными выходными данными.
Справочный термин ИИ
Синтетические данные
Искусственно сгенерированные данные, используемые для дополнения, моделирования или защиты конфиденциальных данных обучения.
Справочный термин ИИ
Системная подсказка
Инструкция с высоким приоритетом, определяющая поведение, политику и стиль ответа модели.
Справочный термин ИИ
Температура
Настройка выборки, контролирующая случайность генерируемых выходных данных.
Справочный термин ИИ
Токен
Фрагмент текста, обрабатываемый языковыми моделями, например фрагмент слова или символ.
Справочный термин ИИ
Токенизация
Процесс разделения текста на токены для ввода модели.
Справочный термин ИИ
Использование инструмента
Способность модели вызывать внешние инструменты, такие как поиск, калькуляторы или API.
Справочный термин ИИ
Топ-k выборка
Стратегия декодирования, которая производит выборку только из k наиболее вероятных следующих токенов.
Справочный термин ИИ
Выборка Top-p (ядра)
Стратегия декодирования, которая производит выборку из наименьшего набора токенов, сумма вероятностей которых равна p.
Справочный термин ИИ
Трансферное обучение
Применение знаний, полученных в одной задаче или области, для улучшения другой задачи.
Справочный термин ИИ
Трансформатор
Нейронная архитектура, которая использует внимание для параллельного моделирования отношений между последовательностями.
Справочный термин ИИ
Потеря тренировки
Значение ошибки модели вычисляется во время обучения и со временем оптимизируется в сторону уменьшения.
Справочный термин ИИ
Обучение без присмотра
Шаблоны обучения на основе немаркированных данных без явных целевых результатов.
Справочный термин ИИ
Набор проверки
Набор данных, используемый во время разработки для настройки моделей и предотвращения переобучения.
Справочный термин ИИ
База данных векторов
База данных, оптимизированная для хранения и запроса многомерных векторов внедрения.
Справочный термин ИИ
Модель визуального языка (VLM)
Мультимодальная модель, совместно обрабатывающая визуальную и текстовую информацию.
Справочный термин ИИ
Слабый надзор
Использование шумных, эвристических или частичных меток для обучения моделей, когда чистых меток не хватает.
Справочный термин ИИ
Вес
Изученное числовое значение, которое масштабирует сигналы, проходящие через нейронную сеть.
Справочный термин ИИ
Встраивание слов
Плотное векторное представление слов, фиксирующее семантические отношения.
Справочный термин ИИ
XAI (объяснимый ИИ)
Методы и практики, позволяющие сделать прогнозы ИИ более прозрачными и понятными.
Справочный термин ИИ
Обучение с нулевым выстрелом
Решение задач без конкретных примеров, опираясь на предварительные общие знания.
Справочный термин ИИ
Агентский рабочий процесс
Многоэтапный процесс, в котором система ИИ планирует, выполняет, проверяет результаты и движется к цели.
Справочный термин ИИ
Закон об искусственном интеллекте
Нормативно-правовая база Европейского Союза, основанная на рисках, для систем и поставщиков искусственного интеллекта.
Справочный термин ИИ
Налог на согласование
Дополнительные затраты времени, вычислений или скорости продукта, необходимые для того, чтобы сделать системы более безопасными и управляемыми.
Справочный термин ИИ
Утечка эталонного теста
Когда в данных обучения присутствуют примеры эталонных тестов или близкие варианты, заявленная производительность завышается.
Справочный термин ИИ
Причинный вывод
Методы оценки причинно-следственных связей, а не простых корреляций.
Справочный термин ИИ
Доверительный интервал
Статистический диапазон, который, вероятно, содержит истинное значение измеренного показателя модели.
Справочный термин ИИ
Конституционный ИИ
Подход к обучению и формированию поведения, при котором результаты модели определяются фиксированным набором письменных принципов.
Справочный термин ИИ
Происхождение данных
Запись о том, откуда взялись данные, как они были преобразованы и где они используются.
Справочный термин ИИ
Происхождение данных
Документированное происхождение, право собственности и история набора данных или артефакта модели.
Справочный термин ИИ
Дифференциальная конфиденциальность
Метод конфиденциальности, который добавляет статистический шум, поэтому отдельные записи не могут быть надежно выведены из выходных данных.
Справочный термин ИИ
Дистиллированная модель
Меньшая модель обучена имитировать поведение более крупной модели, используя при этом меньше вычислений.
Справочный термин ИИ
Встраивание модели
Модель, специализированная для преобразования данных в векторы, используемые для семантического поиска, кластеризации и извлечения данных.
Справочный термин ИИ
Эвал Харнесс
Повторяемая среда оценки, которая запускает подсказки, наборы данных и логику оценки в разных версиях модели.
Справочный термин ИИ
Магазин функций
Управляемая система для последовательного хранения и предоставления проверенных функций машинного обучения для обучения и вывода.
Справочный термин ИИ
Заземленность
Степень, в которой реакция ИИ подтверждается исходными данными или полученными доказательствами.
Справочный термин ИИ
Защищенное декодирование
Стратегия генерации, которая ограничивает выходные токены допустимыми структурами или вариантами, совместимыми с политикой.
Справочный термин ИИ
Модель человеческих предпочтений
Модель, обученная на человеческом рейтинге, чтобы предсказать, какие ответы пользователи, скорее всего, предпочтут.
Справочный термин ИИ
Конечная точка вывода
Развернутый интерфейс API, который получает запросы модели и возвращает прогнозы в рабочей среде.
Справочный термин ИИ
База знаний
Курируемая коллекция документов или записей, используемая для поиска, автоматизации поддержки или обоснования ответов.
Справочный термин ИИ
Скрытое пространство
Сжатое репрезентативное пространство, в котором схожие понятия расположены рядом друг с другом как векторы.
Справочный термин ИИ
Модельный реестр
Центральный каталог для управления версиями, утверждения и отслеживания моделей в разных средах.
Справочный термин ИИ
ИИ на устройстве
Вывод ИИ выполняется локально на пользовательском оборудовании, а не в удаленном облачном сервисе.
Справочный термин ИИ
Выходной анализатор
Логика, которая проверяет и преобразует выходные данные модели в строго типизированные структуры, пригодные для машинного использования.
Справочный термин ИИ
Шаблон подсказки
Шаблон многократного использования с переменными, правилами форматирования и инструкциями для конкретных задач.
Справочный термин ИИ
Точность поиска
Доля полученных элементов, соответствующих запросу пользователя.
Справочный термин ИИ
Обоснование безопасности
Структурированный аргумент, подкрепленный доказательствами, о том, что система ИИ безопасна для определенного контекста использования.
Справочный термин ИИ
Теневое развертывание
Запуск модели параллельно с производственным трафиком, не влияя на решения, принимаемые пользователем.
Справочный термин ИИ
Структурированный вывод
Вывод модели ограничен определенной схемой, такой как JSON, аргументами инструмента или типизированными полями.
Справочный термин ИИ
Вычисление во время тестирования
Дополнительные вычисления вывода, используемые во время формирования ответа для улучшения качества или рассуждения.
Справочный термин ИИ
Доверительная калибровка
Согласование уверенности пользователей в результатах работы ИИ с фактической надежностью системы в каждой задаче.
Справочный термин ИИ
Биллинг на основе использования
Цены, при которых затраты масштабируются в зависимости от вызовов API, токенов, времени вывода или потребляемых вычислительных ресурсов.
Справочный термин ИИ
Нулевое сохранение данных
Политика, согласно которой полезные данные запроса/ответа не сохраняются после обработки за пределами кратковременных операционных окон.
Справочный термин ИИ
Спекулятивное декодирование
Метод ускорения вывода, при котором небольшая черновая модель предлагает токены, которые параллельно проверяет более крупная модель.
Справочный термин ИИ
КВ-кэш
Сохраненные тензоры ключей и значений из предыдущих токенов, которые позволяют преобразователям генерировать новые токены без повторного вычисления прошлого внимания.
Справочный термин ИИ
MCP (протокол контекста модели)
Открытый протокол, который позволяет приложениям ИИ стандартным образом подключаться к внешним инструментам, источникам данных и поставщикам контекста.
Справочный термин ИИ
Агентический цикл
Итеративный цикл, в котором агент ИИ наблюдает, планирует, действует и размышляет, пока не достигнет цели или не достигнет условия остановки.
Справочный термин ИИ
Реакт
Шаблон подсказок, в котором этапы рассуждения чередуются с действиями по использованию инструментов для более надежного решения задач.
Справочный термин ИИ
Дерево мыслей
Подход к рассуждению, при котором модель исследует несколько путей решения ветвления и выбирает наиболее перспективные из них.
Справочный термин ИИ
DPO (прямая оптимизация предпочтений)
Метод обучения, который настраивает модели непосредственно на парах предпочтений без необходимости использования отдельной модели вознаграждения.
Справочный термин ИИ
QLoRA
Метод тонкой настройки, сочетающий 4-битное весовое квантование с адаптерами LoRA для уменьшения потребности в памяти.
Справочный термин ИИ
Вспышка внимания
Оптимизированный алгоритм внимания, который уменьшает использование памяти и ускоряет обучение и вывод преобразователей.
Справочный термин ИИ
Многоголовое внимание
Механизм-преобразователь, который параллельно выполняет несколько операций внимания для фиксации различных типов отношений.
Справочный термин ИИ
Позиционное кодирование
Информация добавлена во встраивания токенов, чтобы преобразователи могли различать порядок последовательности.
Справочный термин ИИ
RoPE (вращательно-позиционные вложения)
Метод позиционного кодирования, который меняет векторы запроса и ключа для кодирования относительных позиций токенов.
Справочный термин ИИ
АлиБи
Метод позиционной предвзятости, который штрафует оценки внимания на основе расстояния между маркерами, помогая моделям экстраполировать на более длинные контексты.
Справочный термин ИИ
Раздвижное окно Внимание
Схема внимания, при которой каждый токен обращается только к окну соседних токенов фиксированного размера для сокращения вычислительных ресурсов.
Справочный термин ИИ
BPE (кодирование пары байтов)
Алгоритм токенизации подслов, который объединяет наиболее часто встречающиеся пары символов в токены многократного использования.
Справочный термин ИИ
ПредложениеЧасть
Независимый от языка токенизатор, который изучает единицы подслова непосредственно из необработанного текста без предварительного разделения на пробелы.
Справочный термин ИИ
ANN (приблизительный ближайший сосед)
Алгоритмы, которые находят векторы, близкие к запросу, без исчерпывающего сравнения, жертвуя точностью ради скорости.
Справочный термин ИИ
HNSW
Индексная структура на основе графов для быстрого приближенного поиска ближайших соседей по многомерным векторам.
Справочный термин ИИ
Реранкер
Модель, которая изменяет порядок исходного набора полученных результатов, чтобы наиболее релевантные элементы располагались вверху.
Справочный термин ИИ
Гибридный поиск
Подход к поиску, который сочетает в себе поиск по ключевым словам (лексический) с векторным (семантическим) поиском для лучшей запоминаемости и точности.
Справочный термин ИИ
Кросс-энкодер
Модель, которая оценивает запрос и документ вместе за один проход, обеспечивая высокую точность оценки релевантности.
Справочный термин ИИ
Би-энкодер
Модель, которая кодирует запросы и документы в отдельные векторы, чтобы их можно было быстро сравнивать в масштабе.
Справочный термин ИИ
LLM в качестве судьи
Использование языковой модели для оценки или сравнения результатов других моделей во время оценки.
Справочный термин ИИ
Пас@к
Метрика оценки кода, измеряющая вероятность того, что хотя бы один из k сгенерированных образцов пройдет тесты.
Справочный термин ИИ
ММЛУ
Язык эталонного тестирования моделирует 57 академических и профессиональных предметов с использованием вопросов с несколькими вариантами ответов.
Справочный термин ИИ
HumanEval
Эталон задач программирования на Python, используемый для измерения правильности генерации кода с помощью модульных тестов.
Справочный термин ИИ
GSM8K
Эталон математических словесных задач в начальной школе, используемый для оценки пошаговых рассуждений в языковых моделях.
Справочный термин ИИ
Фактичность
Насколько точно утверждения модели соответствуют поддающейся проверке реальной информации.
Справочный термин ИИ
Цитаты
Ссылки на исходные отрывки или документы, включенные в ответ модели для подтверждения ее утверждений.
Справочный термин ИИ
Водяные знаки
Встраивание обнаруживаемого сигнала в текст или медиафайлы, сгенерированные ИИ, чтобы впоследствии его можно было идентифицировать как созданный машиной.
Справочный термин ИИ
Середина обучения
Промежуточный этап обучения между предварительным обучением и постобучением, часто используемый для корректировки возможностей или предметной области.
Справочный термин ИИ
Пост-тренинг
Этапы обучения, применяемые после предварительного обучения, такие как настройка инструкций, оптимизация предпочтений и настройка безопасности.
Справочный термин ИИ
Самостоятельная игра
Схема обучения, при которой модель совершенствуется за счет генерации данных посредством взаимодействия или соревнований с собственными копиями.
Справочный термин ИИ
РЭГ-Фьюжн
Метод поиска, который генерирует несколько вариантов запроса, извлекает результаты для каждого и объединяет рейтинги.
Справочный термин ИИ
Многозапросный поиск
Техника поиска, которая переписывает пользовательский запрос на несколько вариантов для улучшения отзыва.
Справочный термин ИИ
Получение родительского документа
Шаблон поиска, который ищет небольшие фрагменты, но возвращает более крупные родительские документы для более богатого контекста.
Справочный термин ИИ
Поиск луча
Алгоритм декодирования, который сохраняет несколько верхних последовательностей-кандидатов на каждом этапе для поиска выходных данных с более высокой вероятностью.
Справочный термин ИИ
Штраф за повторение
Параметр декодирования, который снижает вероятность токенов, которые модель уже создала, чтобы уменьшить количество циклов.
Справочный термин ИИ
Штраф за частоту
Настройка декодирования, которая снижает вероятность появления токенов пропорционально тому, как часто они появлялись на данный момент.
Справочный термин ИИ
Штраф за присутствие
Настройка декодирования, которая снижает вероятность появления токенов вообще, поощряя новые темы.
Справочный термин ИИ