Hub documentation
Exemples et tutoriels
Exemples et tutoriels
Entraîner des modèles
Les commandes de lancement pour Transformers, TRL, Unsloth et Axolotl se trouvent sur Train Models on Jobs. Chacune renvoie vers le guide propre à la bibliothèque.
Traiter des données à grande échelle
DataTrove fournit un JobsPipelineExecutor expérimental pour distribuer les pipelines de traitement de données sur un pool de Jobs. Il prend en charge les limites de concurrence, les dépendances multi-étapes, les nouvelles tentatives et les exécutions résumables — relancer un pipeline ignore les tâches déjà terminées et n'exécute que celles restantes.
Consultez les exemples prêts à l’emploi pour :
- Filtrer un jeu de données du Hub
- Tokenisation et fusion d'un jeu de données du Hub
- Déduplication MinHash multi-étapes
Scripts UV
L’organisation uv-scripts maintient une collection de scripts uv autonomes qui s’exécutent sur Jobs avec une seule commande. Les scripts couvrent l’OCR, l’inférence par lots, la classification de texte, la détection d’objets, les statistiques de jeu de données, la visualisation d’embeddings, et plus encore.
Unsloth fournit également des scripts d’entraînement prêts à l’emploi pour l’ajustement fin de LLM et VLM sur Jobs.
Compétences de l'agent de codage
Les agents de codage tels que Claude Code, Codex et Cursor peuvent soumettre et surveiller les Jobs pour vous. Installez la compétence hf de la CLI, générée à partir de votre CLI installée afin qu'elle reste à jour :
hf skills add
Consultez Hugging Face CLI for AI agents pour la configuration par agent et Agent Skills pour les compétences de formation et d’autres flux de travail.
Sandbox
La fonctionnalité expose ports des Jobs en fait un choix idéal pour créer des sandboxes, c’est-à-dire des environnements temporaires et autonomes utilisés par les agents et les applications LLM.
Tutoriels et projets de la communauté
- Entraînez sur des jeux de données massifs sans les télécharger - Stream des datasets directement sur Jobs avec Unsloth, aucun stockage local requis
- Ajuster finement un modèle vision-langage avec TRL - Ajuster finement Qwen2.5-VL pour des tâches d'histoire de l'art en utilisant TRL et Jobs
- FreeFlow - Plateforme d'annotation open source avec intégration native de Jobs pour l'entraînement de modèles de détection d'objets YOLOv11
- hfdask - Exécutez des programmes Dask sur des Jobs CPU et GPU à partir d'une seule définition de cluster YAML, avec mTLS entre les nœuds et nettoyage automatique
Vous avez un tutoriel ou un projet utilisant Jobs ? Ouvrez une PR pour l’ajouter ici.
Update on GitHub