Toutes les ressources premium et membres pour 8,99 €/mois, en abonnement sans engagement. Voir les offres

PalateKit

Menu

Demander une ressource

Décrivez en une phrase la ressource qui vous manque. Nous vous écrirons quand elle sera publiée.

0 / 280

Débloquer PalateKit

Tout débloquer

Offre

Le paiement vaut acceptation de nos conditions générales de vente.

Paiement sécurisé par Stripe. Reçus et factures envoyés par e-mail.

Content de vous revoir

Connectez-vous pour installer, télécharger ou sauvegarder cette ressource. Un compte gratuit suffit pour les ressources gratuites.

Mise à l'échelle de l'inférence LLM avec KEDA v1.0.0

Utilisez cette ressource pour mettre à l'échelle automatiquement l'inférence LLM sur Kubernetes

Nouveau

  • 549 téléchargements
  • 183 mentions J'aime
  • 122 sauvegardes

Gratuit

Installer avec la CLI

Dans un terminal, depuis le dossier voulu :

npx --yes palatekit@latest install llm-inference-autoscaling-keda

Sans option, la skill va dans ~/.agents/skills/ ; ajoutez --agent claude-code (ou codex, cursor…) pour viser un agent.

Première fois : connectez la CLI avec

npx --yes palatekit@latest login

L'agent installe l'opérateur GPU NVIDIA, déploie des pods vLLM avec ressources GPU, puis configure KEDA sur des métriques Prometheus ou une file Redis, avec un mélange de GPU à la demande et spot. Vous obtenez les manifestes d'autoscaling et la stratégie de coûts.

Choisie surtout par

Mise à jour le 2 novembre 2026

Carte de la skill « Mise à l'échelle de l'inférence LLM avec KEDA »

Caractéristiques

Guides d'installation
Génère avec
Le modèle de votre agent
Licence
MIT

Ressources similaires

Tout voir

Ce que vous obtenez

  • SKILL.md : opérateur GPU NVIDIA, déploiement vLLM et autoscaling KEDA sur métriques Prometheus
  • SKILL.md : mise à l'échelle par file Redis, ScaledJob pour l'inférence par lot et pool mixte spot

Pour qui

  • Le trafic vers votre API LLM est irrégulier et la capacité doit suivre la charge
  • Vous voulez réduire la facture de GPU avec des instances spot

Pas pour qui

    Étiquettes

    • llm
    • autoscaling
    • keda
    • gpu
    • kubernetes

    À propos

    Vous dites

    « Mets en place l'autoscaling KEDA de notre service vLLM à partir de la longueur de la file de requêtes. »

    Carte de la skill « Mise à l'échelle de l'inférence LLM avec KEDA »

    Skill publiée par bagelhole sous licence MIT. Fichiers livrés dans leur version d'origine, en anglais.

    Voir plus

    Comment l'utiliser

    1. Installez la skill dans le dossier de skills de votre agent
    2. Demandez à votre agent de mettre à l'échelle automatiquement l'inférence LLM sur Kubernetes
    3. Relisez et ajustez le résultat

    Aperçu du contenu

    Fichiers

    • LICENSE1,1 Ko
    • NOTICE-PALATEKIT.md0,5 Ko
    • SKILL.md8 Ko

    Origine et licence

    Référencée sans modification

    Auteur
    bagelhole
    Source
    github.com/bagelhole/devops-security-agent-skills/tree/0365f57a079b1332f95cf26e31dd2d5332a8399f/infrastructure/local-ai/llm-inference-scaling
    Licence
    MIT

    Notice

    « llm-inference-scaling » (bagelhole, MIT) livré dans sa version d'origine : fiche en français et en anglais par PalateKit.

    Avis des utilisateurs

    –

    Aucune note pour l'instant

    Chargement des avis…

    Supprimer votre avis ?

    Votre note et votre commentaire seront retirés de la fiche.