Cas d'usage
Customise a model
Adapt a general model to a specific task or style, and keep the cost of doing so proportionate.
Voir la pile recommandée, avec les raisons et les alternatives →
Ce qu'il faut
Dans l'ordre où vous les adopteriez. Chaque étape s'ouvre dans le graphe de connaissances.
-
Family of decoder-only Transformer language models trained with a generative objective.
-
Continue training a pre-trained model on task-specific data to adapt its behaviour.
-
Fine-tuning by training small low-rank adapter matrices instead of all weights.
-
Cached attention keys and values that make generating one token at a time affordable.