Bibliothèque IA gratuite

Technique GuidesLibre pour toujours.

177 des guides en anglais simple, des parcours d'apprentissage structurés et une bibliothèque ouverte — construits par une organisation à but non lucratif indépendante 501(c)(3) pour que tout le monde puisse comprendre l'IA moderne.

177Guides gratuits
1Pistes thématiques
~2 minPar guide
~6hTemps de lecture

Commencez ici

Cinq cours axés sur les résultats

Chaque cours comprend des résultats explicites, des compétences cartographiées, des activités pratiques et une synthèse appliquée.

Pistes thématiques

Parcourir par piste

Sautez dans la zone qui vous tient à cœur. Chaque piste comporte plusieurs guides en anglais simple.

Bibliothèque complète

Tous les guides

177 de 1019 guides illustrés. Filtrez par piste ou recherchez ci-dessus.

Technique

Parallélisme de séquence et attention en anneau

Le parallélisme de séquence divise une seule longue séquence d'entrée sur plusieurs GPU le long de la dimension du jeton (temps), et Ring Attention permet à ces GPU de calculer…

2 lecture min.Lire
Technique

Compromis de recalcul d’activation

Le recalcul des activations (gradient ou point de contrôle d'activation) économise la mémoire GPU pendant l'entraînement en supprimant les activations intermédiaires lors de la passe avant…

2 lecture min.Lire
Technique

Optimisation de la politique relative du groupe

Group Relative Policy Optimization (GRPO) est une méthode d'apprentissage par renforcement permettant d'affiner les modèles de langage qui juge chaque réponse par rapport à un groupe…

2 lecture min.Lire
Technique

Normaliser les flux

Les flux normalisants sont des modèles génératifs qui transforment un simple bruit (comme un gaussien) en données complexes via une chaîne de facteurs inversibles, différentiables…

2 lecture min.Lire
Technique

Modèles basés sur l'énergie

Les modèles basés sur l'énergie (EBM) apprennent une fonction « énergétique » scalaire qui attribue des valeurs faibles aux données plausibles et des valeurs élevées aux données invraisemblables, définissant…

2 lecture min.Lire
Technique

Déchargement de l'état de l'optimiseur vers le CPU et NVMe

Une astuce pour économiser la mémoire qui stocke la lourde comptabilité des entraînements (états des optimiseurs, gradients, parfois poids) dans la RAM du CPU ou sur les SSD NVMe…

2 lecture min.Lire
Technique

Partage de point de contrôle et reprise de la formation

Techniques permettant de sauvegarder l'état d'entraînement d'un modèle en morceaux (fragments) afin que des modèles géants puissent être enregistrés et rechargés sans étouffer les limites de mémoire ou de disque, et ainsi…

2 lecture min.Lire
Technique

Gestion et fragmentation de la mémoire GPU

Comment les frameworks d'IA allouent, réutilisent et récupèrent la mémoire limitée d'un GPU, et pourquoi les lacunes restantes (fragmentation) peuvent même provoquer des erreurs de mémoire insuffisante…

2 lecture min.Lire
Technique

Partitionnement GPU multi-instance

Le GPU multi-instance (MIG) est une technologie NVIDIA qui découpe un seul GPU physique en plusieurs partitions matérielles isolées.

2 lecture min.Lire
Technique

Planification GPU et orchestration de cluster

La planification GPU décide quelles tâches s'exécutent sur quels accélérateurs et à quel moment, tandis que l'orchestration coordonne ces tâches sur l'ensemble d'un cluster de machines.

2 lecture min.Lire
Technique

Slurm pour les clusters de formation en IA

Slurm est un gestionnaire de charge de travail open source qui planifie et exécute des tâches sur des clusters de calcul haute performance, et il est devenu un choix par défaut pour les grandes IA…

2 lecture min.Lire
Technique

Invite de planification et de résolution

L'invite Planifier et résoudre (PS) indique à un modèle de langage de concevoir d'abord un plan explicite, puis de l'exécuter étape par étape, en corrigeant les échecs évidents…

2 lecture min.Lire

Vous avez fini de lire ? Prouvez-le.

Vérifiez ce que vous avez appris avec un quiz thématique, puis explorez nos cours structurés ou travaillez pour obtenir un certificat. Chaque guide reste libre de lecture.