Глоссарий терминов искусственного интеллекта

Что такое Обратное распространение ошибки?

Определение

Основной алгоритм обучения, который обновляет веса модели путем распространения ошибок прогнозирования обратно по сети.

Функция потерьМатематическая цель, позволяющая количественно оценить ошибку прогноза во время обучения.ВесИзученное числовое значение, которое масштабирует сигналы, проходящие через нейронную сеть.Вспышка вниманияОптимизированный алгоритм внимания, который уменьшает использование памяти и ускоряет обучение и вывод преобразователей.Самостоятельная играСхема обучения, при которой модель совершенствуется за счет генерации данных посредством взаимодействия или соревнований с собственными копиями.Утечка эталонного тестаКогда в данных обучения присутствуют примеры эталонных тестов или близкие варианты, заявленная производительность завышается.BPE (кодирование пары байтов)Алгоритм токенизации подслов, который объединяет наиболее часто встречающиеся пары символов в токены многократного использования.

Узнайте больше в наших бесплатных руководствах.

См. также