Qu'est-ce que Modèle de petit langage (SLM)?

Une méthode d'accélération d'inférence dans laquelle un petit projet de modèle propose des jetons qu'un modèle plus grand vérifie en parallèle.

Un tokenizer indépendant de la langue qui apprend les unités de sous-mots directement à partir du texte brut sans pré-diviser sur les espaces.

Le vaste domaine de la construction de systèmes qui exécutent des tâches nécessitant une reconnaissance de formes, un raisonnement, un langage ou une prise de décision.

Nombre maximum de jetons d'entrée qu'un modèle de langage peut traiter simultanément.

Une architecture neuronale optimisée pour traiter des données de type grille telles que des images.

Apprendre ou adapter un comportement à partir d’un petit nombre d’exemples seulement.