Toutes les ressources premium et membres pour 8,99 €/mois, en abonnement sans engagement. Voir les offres

PalateKit

Menu

Demander une ressource

Décrivez en une phrase la ressource qui vous manque. Nous vous écrirons quand elle sera publiée.

0 / 280

Débloquer PalateKit

Tout débloquer

Offre

Le paiement vaut acceptation de nos conditions générales de vente.

Paiement sécurisé par Stripe. Reçus et factures envoyés par e-mail.

Content de vous revoir

Connectez-vous pour installer, télécharger ou sauvegarder cette ressource. Un compte gratuit suffit pour les ressources gratuites.

Choix de la stratégie d'entraînement distribué v1.0.0

Utilisez cette ressource pour choisir et configurer la stratégie de parallélisme distribué dans NeMo AutoModel

Nouveau

  • 332 téléchargements
  • 198 mentions J'aime
  • 155 sauvegardes

Gratuit

Installer avec la CLI

Dans un terminal, depuis le dossier voulu :

npx --yes palatekit@latest install distributed-training-strategy-automodel

Sans option, la skill va dans ~/.agents/skills/ ; ajoutez --agent claude-code (ou codex, cursor…) pour viser un agent.

Première fois : connectez la CLI avec

npx --yes palatekit@latest login

L'agent choisit d'abord la stratégie, puis n'indique que les champs YAML et les contraintes utiles à la question, avec des exemples pour FSDP2, TP plus PP sur un grand modèle multi-nœuds ou le parallélisme expert d'un MoE. Vous obtenez une configuration cohérente avec les limites de Megatron FSDP.

Choisie surtout par

Mise à jour le 2 novembre 2026

Carte de la skill « Choix de la stratégie d'entraînement distribué »

Caractéristiques

Guides d'installation
Génère avec
Le modèle de votre agent
Licence
Apache-2.0

Ressources similaires

Tout voir

Ce que vous obtenez

  • SKILL.md : stratégies et exemples
  • evals/evals.json : cas d'évaluation
  • skill-card.md : fiche de la skill

Pour qui

  • Vous passez d'un GPU à plusieurs nœuds dans AutoModel
  • Vous hésitez entre FSDP2 et Megatron FSDP

Pas pour qui

    Étiquettes

    • distribué
    • FSDP2
    • parallélisme
    • AutoModel

    À propos

    Vous dites

    « Quelle stratégie distribuée pour un MoE de 30B sur 2 nœuds de 8 GPU dans AutoModel ? »

    Carte de la skill « Choix de la stratégie d'entraînement distribué »

    Skill publiée par nvidia sous licence Apache-2.0. Fichiers livrés dans leur version d'origine, en anglais.

    Voir plus

    Comment l'utiliser

    1. Installez la skill dans le dossier de skills de votre agent
    2. Demandez à votre agent de choisir et configurer la stratégie de parallélisme distribué dans NeMo AutoModel
    3. Relisez et ajustez le résultat

    Aperçu du contenu

    Fichiers

    • BENCHMARK.md4,6 Ko
    • evals/evals.json3,3 Ko
    • LICENSE11,3 Ko
    • NOTICE-PALATEKIT.md0,5 Ko
    • skill-card.md4,1 Ko
    • SKILL.md19,4 Ko
    • skill.oms.sig4,5 Ko

    Origine et licence

    Référencée sans modification

    Auteur
    nvidia
    Source
    github.com/nvidia/skills/tree/ca116d60beafe1b4459f0ab790b7b450912c56b0/skills/nemo-automodel-distributed-training
    Licence
    Apache-2.0

    Notice

    « nemo-automodel-distributed-training » (nvidia, Apache-2.0) livré dans sa version d'origine : fiche en français et en anglais par PalateKit.

    Avis des utilisateurs

    –

    Aucune note pour l'instant

    Chargement des avis…

    Supprimer votre avis ?

    Votre note et votre commentaire seront retirés de la fiche.