Toutes les ressources premium et membres pour 8,99 €/mois, en abonnement sans engagement. Voir les offres

PalateKit

Menu

Demander une ressource

Décrivez en une phrase la ressource qui vous manque. Nous vous écrirons quand elle sera publiée.

0 / 280

Débloquer PalateKit

Tout débloquer

Offre

Le paiement vaut acceptation de nos conditions générales de vente.

Paiement sécurisé par Stripe. Reçus et factures envoyés par e-mail.

Content de vous revoir

Connectez-vous pour installer, télécharger ou sauvegarder cette ressource. Un compte gratuit suffit pour les ressources gratuites.

Choix des stratégies de parallélisme dans Megatron Bridge v1.0.0

Utilisez cette ressource pour choisir et combiner les stratégies de parallélisme pour un entraînement Megatron Bridge

Nouveau

  • 453 téléchargements
  • 209 mentions J'aime
  • 240 sauvegardes

Gratuit

Installer avec la CLI

Dans un terminal, depuis le dossier voulu :

npx --yes palatekit@latest install parallelism-strategy-selection-guide

Sans option, la skill va dans ~/.agents/skills/ ; ajoutez --agent claude-code (ou codex, cursor…) pour viser un agent.

Première fois : connectez la CLI avec

npx --yes palatekit@latest login

L'agent propose un point de départ selon la taille du modèle (dense ou MoE), rapproche la topologie matérielle et la longueur de séquence, calcule le nombre minimal de GPU et une estimation de mémoire, puis donne la configuration combinée. Vous obtenez un plan de parallélisme justifié.

Choisie surtout par

Mise à jour le 2 novembre 2026

Carte de la skill « Choix des stratégies de parallélisme dans Megatron Bridge »

Caractéristiques

Guides d'installation
Génère avec
Le modèle de votre agent
Licence
Apache-2.0

Ressources similaires

Tout voir

Ce que vous obtenez

  • SKILL.md : règles de dimensionnement et exemples
  • card.yaml : fiche structurée
  • evals/evals.json : cas d'évaluation

Pour qui

  • Vous passez d'un modèle de 10B à 70B et ne savez plus quel parallélisme choisir
  • Vous avez un nombre fixe de GPU et voulez le répartir

Pas pour qui

    Étiquettes

    • parallélisme
    • TP
    • PP
    • Megatron Bridge

    À propos

    Vous dites

    « Quel parallélisme pour un modèle dense de 70B sur 64 GPU H100 en séquences de 8K ? »

    Carte de la skill « Choix des stratégies de parallélisme dans Megatron Bridge »

    Skill publiée par nvidia sous licence Apache-2.0. Fichiers livrés dans leur version d'origine, en anglais.

    Voir plus

    Comment l'utiliser

    1. Installez la skill dans le dossier de skills de votre agent
    2. Demandez à votre agent de choisir et combiner les stratégies de parallélisme pour un entraînement Megatron Bridge
    3. Relisez et ajustez le résultat

    Aperçu du contenu

    Fichiers

    • BENCHMARK.md4,4 Ko
    • card.yaml2,9 Ko
    • evals/evals.json1,5 Ko
    • LICENSE11,3 Ko
    • NOTICE-PALATEKIT.md0,5 Ko
    • skill-card.md3,7 Ko
    • SKILL.md9,6 Ko
    • skill.oms.sig4,7 Ko

    Origine et licence

    Référencée sans modification

    Auteur
    nvidia
    Source
    github.com/nvidia/skills/tree/ca116d60beafe1b4459f0ab790b7b450912c56b0/skills/nemo-mbridge-perf-parallelism-strategies
    Licence
    Apache-2.0

    Notice

    « nemo-mbridge-perf-parallelism-strategies » (nvidia, Apache-2.0) livré dans sa version d'origine : fiche en français et en anglais par PalateKit.

    Avis des utilisateurs

    –

    Aucune note pour l'instant

    Chargement des avis…

    Supprimer votre avis ?

    Votre note et votre commentaire seront retirés de la fiche.