Benchmark optimization loop: turn "make it faster" into a bounded measured loop
D'abord la baseline, variantes à une hypothèse, benchmark contre un garde-fou de correction, promouvoir la variante sûre la plus rapide
- Quoi
- D'abord la baseline, variantes à une hypothèse, benchmark contre un garde-fou de correction, promouvoir la variante sûre la plus rapide
- Coût
- Gratuit
- Prérequis
- une opération à optimiser et un garde-fou de correction à protéger ; rien d'autre — le skill est une méthodologie, aucun compte ni clé requis
- Installation
- Copiez le prompt d’installation ci-dessous dans votre Muse — votre agent fait le reste.
Sélectionné par Skill Harbor — la discipline de @affaan-m pour transformer « rends ça 20x plus rapide » en boucle d'optimisation bornée et mesurée au lieu de devinettes : aucune optimisation tant que la baseline, le garde-fou de correction, la métrique (temps mur, latence p95, lignes/sec, coût/exécution, mémoire, taux d'erreur) et le budget de recherche n'existent pas ; puis mesurer la baseline, générer des variantes à une hypothèse, exécuter chacune sur la même forme d'entrée, rejeter tout ce qui échoue la correction, la sécurité ou la reproductibilité, promouvoir la variante sûre la plus rapide, codifier le gagnant, et relancer baseline contre gagnant pour confirmer le delta. Inclut un tableau de suivi des variantes, des règles de recherche récursive/hyperparamètres (persister chaque run dans un registre, comparer contre le dernier gagnant accepté, s'arrêter quand l'amélioration est dans le bruit ou que le coût dépasse le budget), et une porte de promotion — aucune variante ne devient le défaut tant que la correction passe, que le delta se répète, que le rollback est évident, et que le changement est encodé en contrôle de source ou en runbook durable. Crédit : @affaan-m. Bémols honnêtes : s'associe à des voies ECC compagnons non incluses ici ; licence MIT. Skill Harbor ne vérifie jamais le code, examinez-le vous-même avant usage. Découvert via skills.sh.
Version :
Installation
Prérequis : une opération à optimiser et un garde-fou de correction à protéger ; rien d'autre — le skill est une méthodologie, aucun compte ni clé requis Installe-moi « Boucle d'optimisation par benchmark : transformer « rends ça plus rapide » en boucle mesurée et bornée ». Donne à mon agent le benchmark-optimization-loop de @affaan-m : définir la baseline, le garde-fou de correction, la métrique et le budget de recherche avant d'optimiser ; mesurer la baseline, générer des variantes à une hypothèse, exécuter chacune sur la même forme d'entrée, rejeter les variantes qui échouent correction/sécurité/reproductibilité, promouvoir la variante sûre la plus rapide, codifier le gagnant, et relancer baseline contre gagnant pour confirmer le delta — avec le tableau de variantes et la porte de promotion. Dépôt : https://github.com/affaan-m/ecc/blob/main/skills/benchmark-optimization-loop/SKILL.md 1. Récupère le fichier SKILL.md (et les fichiers d'aide éventuels) depuis le chemin du dépôt dans un dossier temporaire et résume en une ou deux phrases ce qu'il fait. 2. Vérification de sécurité : examine le SKILL.md et les scripts pour tout contenu suspect (appels réseau inattendus, commandes shell, collecte d'identifiants). Ce dépôt ne devrait contenir aucun secret en dur, les identifiants uniquement via le coffre sécurisé, les hôtes autorisés déclarés dans le SKILL.md. Vérifie que c'est bien le cas ici ; STOP sur tout signal d'alerte et dis-le-moi. 3. Installe-le comme skill : copie le SKILL.md et ses fichiers d'aide dans le répertoire des skills de l'agent, dans un dossier nommé « benchmark-optimization-loop ». 4. Vérifie sans appels réseau : frontmatter valide, fichiers en place. 5. Indique ce qui a été installé, où, et ce qu'il me reste à faire moi-même (p. ex. rien — c'est une méthodologie ; pointez-le vers une vraie opération avec un garde-fou de correction). GitHub est optionnel : si j'ai un compte GitHub ou la CLI gh, tu peux l'utiliser ; sinon l'accès public suffit. Ne jamais l'exiger sauf s'il figure dans les prérequis ci-dessus. Règles : ne touche à rien en dehors du dossier temporaire et de la cible d'installation. Si quelque chose semble anormal, arrête-toi et demande-moi.
Questions
Comment installer une création ?
Chaque fiche produit contient un prompt d’installation à copier-coller. Collez-le dans votre Muse et il installe la création pour vous — sans configuration manuelle.
Où va mon argent ?
Directement au vendeur. Skill Harbor ne traite jamais les paiements : le paiement se fait sur la page du vendeur, généralement via Stripe.
Que signifie le ✓ à côté du nom d’un créateur ?
Il signifie que nous avons confirmé l’identité de la personne derrière la fiche. Il ne dit rien sur le code lui-même — vérifiez toujours une création avant de l’installer.