GratuitSkills
Création d'un wiki de connaissances
- 418418 téléchargements
- 129129 mentions J'aime
- 161161 sauvegardes
Compatible avec
- Claude Code
- Codex
- Cursor
- et 3 autres
Évaluation de LLM sur plus de 100 benchmarks avec NeMo v1.0.0
Utilisez cette ressource pour évaluer un LLM sur de nombreux benchmarks, de façon reproductible et à grande échelle
Nouveau
- 521 téléchargements
- 102 mentions J'aime
- 173 sauvegardes
Gratuit
Installer avec la CLI
Dans un terminal, depuis le dossier voulu :
npx --yes palatekit@latest install llm-benchmark-nemo-evaluatorSans option, la skill va dans ~/.agents/skills/ ; ajoutez --agent claude-code (ou codex, cursor…) pour viser un agent.
Première fois : connectez la CLI avec
npx --yes palatekit@latest loginL'agent écrit la configuration d'évaluation NeMo, choisit le backend d'exécution (Docker local, Slurm ou cloud), lance les benchmarks sur un échantillon ou en totalité, puis suit l'état des tâches et récupère les résultats. Vous obtenez une évaluation reproductible.
Choisie surtout par
Mise à jour le 2 novembre 2026
Aperçus
Caractéristiques
- Fonctionne dans
- Guides d'installation
- Génère avec
- Le modèle de votre agent
- Licence
- MIT
Ressources similaires
Tout voir- Gratuit
GratuitSkills
Contrôle de santé du wiki
- 552552 téléchargements
- 202202 mentions J'aime
- 127127 sauvegardes
Compatible avec- Claude Code
- Codex
- Cursor
- et 3 autres
GratuitSkills
Interroger son wiki
- 374374 téléchargements
- 131131 mentions J'aime
- 214214 sauvegardes
Compatible avec- Claude Code
- Codex
- Cursor
- et 3 autres
GratuitSkills
Ajouter une source au wiki
- 315315 téléchargements
- 230230 mentions J'aime
- 246246 sauvegardes
Compatible avec- Claude Code
- Codex
- Cursor
- et 3 autres
GratuitSkills
Agent auditeur de wiki
- 556556 téléchargements
- 205205 mentions J'aime
- 192192 sauvegardes
Compatible avec- Claude Code
- Codex
- Cursor
- et 3 autres
GratuitSkills
Assistant de recherche UX
- 598598 téléchargements
- 142142 mentions J'aime
- 236236 sauvegardes
Compatible avec- Claude Code
- Codex
- Cursor
- et 3 autres
GratuitSkills
Agent d'ingestion de wiki
- 437437 téléchargements
- 162162 mentions J'aime
- 191191 sauvegardes
Compatible avec- Claude Code
- Codex
- Cursor
- et 3 autres
GratuitSkills
Agent bibliothécaire de wiki
- 304304 téléchargements
- 120120 mentions J'aime
- 217217 sauvegardes
Compatible avec- Claude Code
- Codex
- Cursor
- et 3 autres
Ce que vous obtenez
- SKILL.md : configuration minimale, exécution et suivi des tâches
- references/execution-backends.md : exécution en Docker local, Slurm ou cloud
- references/custom-benchmarks.md : ajout de benchmarks personnalisés
Pour qui
- Vous comparez un modèle à d'autres sur des benchmarks standard
- Vous devez lancer une évaluation sur un cluster Slurm
Pas pour qui
Étiquettes
- évaluation
- benchmark
- llm
À propos
Vous dites
« Évalue ce modèle sur MMLU et GSM8K via un point d'accès API, avec Docker en local. »
Skill publiée par Orchestra Research sous licence MIT. Fichiers livrés dans leur version d'origine, en anglais.
Voir plusVoir moins
Comment l'utiliser
- Installez la skill dans le dossier de skills de votre agent
- Demandez à votre agent de évaluer un LLM sur de nombreux benchmarks, de façon reproductible et à grande échelle
- Relisez et ajustez le résultat
Aperçu du contenu
Fichiers
- LICENSE1,1 Ko
- NOTICE-PALATEKIT.md0,6 Ko
- references/adapter-system.md9,6 Ko
- references/configuration.md9,8 Ko
- references/custom-benchmarks.md7,2 Ko
- references/execution-backends.md9,5 Ko
- SKILL.md12,4 Ko
Origine et licence
Référencée sans modification
- Auteur
- Orchestra Research
- Source
- github.com/davila7/claude-code-templates/tree/f57964ebda91cdfb31755661ecea9395f30020f1/cli-tool/components/skills/ai-research/evaluation-nemo-evaluator
- Licence
- MIT
Notice
« evaluation-nemo-evaluator » (Orchestra Research, MIT) livré dans sa version d'origine : fiche en français et en anglais par PalateKit.
Avis des utilisateurs
–
Aucune note pour l'instant
Chargement des avis…