Python

TRL

Aligner les LLMs (SFT, DPO, PPO)
par huggingface · Apache-2.0
19 189étoiles2 948forksPythonlangue9 il y a quelques joursdernière poussée
Ajustement finBibliothèque RLHF / d'alignementApache-2.0S'exécute localementPythonAvancé

Depuis le README

Installer
pip install git+https://github.com/huggingface/trl.git

Extraits du README du projet sur GitHub. Le droit d'auteur et les licences restent la propriété des auteurs respectifs.

🛡 Avis de sécurité publiés
Un nombre élevé signifie généralement que le projet est fortement examiné. Un nombre faible signifie généralement qu'il est peu examiné — cela ne veut pas dire qu'il est sûr.
Aucun signal d'activité publique pour cet outil — il n'a pas de dépôt ouvert que nous pouvons mesurer.
Olud Pulse ⓘ ★★★★★★★★★★ /100 signaux suivis
🐳 téléchargements Docker 📦 téléchargements PyPI / mois 📦 téléchargements npm / mois 🚀 Dernière version ·
Visitez le site →Voir sur GitHub

Qu'est-ce que TRL ?

TRL est la bibliothèque de Hugging Face pour le post-entraînement et l'alignement des modèles de langage avec un fine-tuning supervisé, DPO et des méthodes d'apprentissage par renforcement comme PPO.

Pourquoi les gens choisissent TRL

TRL en un coup d'œil

CatégorieAjustement fin
TypeBibliothèque RLHF / d'alignement
LicenceApache-2.0
S'exécute localementOui
Construit avecPython
Niveau de compétenceAvancé
Meilleur pourEntraînement RLHF, DPO et d'alignement
Voir les statistiques et l'activité GitHub

Alternatives open-source à TRL

Autres outils d'ajustement open-source à comparer :

UnslothAjustez les LLM 2x plus vite sur un GPUAxolotlAjustement basé sur la configuration pour de nombreux modèlesLLaMA-FactoryAjustez 100+ modèles avec une interface utilisateurPEFTLoRA et amis de Hugging FaceTorchtuneRecettes post-formation hackables, natives de PyTorchLlama CookbookRecettes officielles pour affiner Llamams-swiftAffinez plus de 500 LLMs et VLMs

TRL tête-à-tête

TRL vs UnslothTRL vs AxolotlTRL vs LLaMA-FactoryTRL vs PEFTTRL vs TorchtuneTRL vs Llama CookbookTRL vs ms-swift

FAQ

TRL est-il gratuit ?

TRL est gratuit et open-source (licence Apache-2.0), vous pouvez donc l'utiliser, l'héberger vous-même et le modifier sans frais.

Puis-je exécuter TRL localement ?

Oui. TRL est conçu pour fonctionner sur votre propre machine ou serveur, en gardant vos données privées.

Quelle est la meilleure alternative à TRL ?

Les alternatives open-source populaires incluent Unsloth, Axolotl, LLaMA-Factory. Consultez les comparaisons ci-dessus pour choisir.

Explorez plus d'IA open-source

Parcourez le répertoire complet des outils, modèles et projets d'IA open-source — mis à jour quotidiennement.

Parcourez tous les outils →