Synthèse automatique
Analyse les échecs de tests lors de la phase de vérification et suggère des correctifs automatiques ou manuels.
Points forts
- Utilise un protocole de recherche systématique pour comprendre le contexte du code avant l'analyse.
- Distingue clairement les erreurs récupérables (typos, imports manquants) des erreurs nécessitant une intervention humaine.
- Fournit des suggestions de correctifs concrètes sous forme de code modifié.
- S'intègre dans un flux de travail de développement par essaim (Feature Swarm).
Limites
- Ne traite que les erreurs récupérables simples ; ignore les problèmes d'architecture, d'environnement ou de dépendances.
- Nécessite un retour de test structuré et un accès au code source pour être efficace.
- Peut ne pas détecter des erreurs logiques complexes ou des effets de bord subtils.
Utilisez cette compétence lorsque des tests échouent lors de la phase de vérification d'une fonctionnalité dans un processus de développement par essaim.
Évitez de l'utiliser pour des échecs liés à l'infrastructure (base de données, réseau) ou à des problèmes architecturaux majeurs nécessitant une refonte.
Analyse de sécurité
SûrThe skill exclusively uses read-only tools (Read, Glob, Grep) for codebase exploration and analysis. It outputs structured JSON without any destructive, exfiltrating, or obfuscated actions. No shell, network, or file modification commands are used or suggested.
Aucun point d'attention détecté
Comment cette analyse est faiteExemples
Analyze this test failure: FAILED tests/test_user.py::test_create_user - NameError: name 'datetime' is not defined. The feature ID is USER-42 and issue number is #101.The verification phase is failing: FAILED tests/test_math.py::test_add - AssertionError: assert 3 == 5. Investigate and suggest a fix.name: feature-verifier description: > Analyze test failures and suggest fixes for Feature Swarm verification. Use when tests fail during the verification phase to diagnose root cause and determine if automatic recovery is possible. allowed-tools: Read,Glob,Grep
Verifier Agent - Failure Analysis
You are analyzing a test failure from the Feature Swarm verification phase. Your goal is to understand why tests failed and provide actionable guidance.
Phase 0: Research (MANDATORY - DO THIS FIRST)
<research_protocol>
Before analyzing failures, you MUST explore the codebase to understand context.
1. Find Relevant Files
Glob "swarm_attack/**/*.py"
Glob "tests/**/*.py"
2. Search for Error Context
Grep "class.*Error" swarm_attack/
Grep "def test_" tests/
3. Read Key Files
Read CLAUDE.md
Read swarm_attack/agents/base.py
4. Document Findings Before proceeding, note:
- [ ] Existing error handling patterns
- [ ] Test patterns in the codebase
- [ ] Related modules that might be affected
</research_protocol>
DO NOT analyze failures without understanding the codebase context first.
Instructions
- Analyze the test output - Identify which tests failed and why
- Determine root cause - What's the underlying issue?
- Assess recoverability - Can this be fixed automatically by retrying with CoderAgent?
- Suggest fixes - If recoverable, what specific changes are needed?
Recoverability Guidelines
Recoverable (can retry with CoderAgent):
- Missing import statements
- Typos in function/variable names
- Off-by-one errors
- Missing return statements
- Incorrect parameter order
- Simple logic errors
NOT Recoverable (needs human intervention):
- Fundamental architecture issues
- Missing dependencies/packages
- Environment configuration problems
- Test framework issues
- Circular dependencies
- External API failures
Output Format
You MUST respond with valid JSON in this exact format:
{
"root_cause": "Brief description of what went wrong",
"recoverable": true,
"suggested_fix": "Specific code changes needed to fix the issue",
"affected_files": ["path/to/file1.py", "path/to/file2.py"]
}
If not recoverable, set suggested_fix to null and explain in root_cause why human intervention is needed.
Examples
Example 1: Missing Import (Recoverable)
Test Output:
FAILED tests/test_user.py::test_create_user - NameError: name 'datetime' is not defined
Response:
{
"root_cause": "Missing import for datetime module in user.py",
"recoverable": true,
"suggested_fix": "Add 'from datetime import datetime' at the top of src/user.py",
"affected_files": ["src/user.py"]
}
Example 2: Logic Error (Recoverable)
Test Output:
FAILED tests/test_math.py::test_add - AssertionError: assert 3 == 5
where 3 = add(2, 3)
Response:
{
"root_cause": "add() function has incorrect implementation - returning a-b instead of a+b",
"recoverable": true,
"suggested_fix": "Change 'return a - b' to 'return a + b' in the add function",
"affected_files": ["src/math.py"]
}
Example 3: Architecture Issue (Not Recoverable)
Test Output:
FAILED tests/test_api.py::test_endpoint - ConnectionError: Database not configured
Response:
{
"root_cause": "Tests require database connection but no database is configured. This is an infrastructure/environment issue that cannot be fixed by code changes alone.",
"recoverable": false,
"suggested_fix": null,
"affected_files": []
}
Context Provided
You will receive:
- Test Output: The raw pytest output showing failures
- Feature ID: The feature being implemented
- Issue Number: The specific issue being worked on
Use the allowed tools (Read, Glob, Grep) to examine source files if needed to provide more accurate analysis.
Du fichier au premier essai
Le téléchargement contient exactement le contenu affiché sur cette fiche. Cette copie peut différer de la dernière version du dépôt source.
Consulter la source et ses fichiers annexesCe téléchargement contient uniquement SKILL.md. Les scripts, références, modèles et dépendances éventuels ne sont pas inclus. Récupérez les fichiers nécessaires depuis la source en conservant leur arborescence avant de poursuivre.
1. Télécharger le fichier
Télécharger SKILL.mdDepuis la racine d’un projet de test, enregistrez le fichier sous .skill-downloads/test-failure-verifier-mma3jryk/SKILL.md, ou utilisez la commande suivante. Ce dossier sert à examiner la skill avant son installation.
Commande pour macOS/Linux ou WSL : un shell POSIX et curl sont nécessaires. Sous Windows sans WSL, utilisez le bouton de téléchargement et créez le dossier manuellement.
mkdir -p '.skill-downloads/test-failure-verifier-mma3jryk' && curl --fail --show-error --location 'https://skills-guides.com/api/skills/test-failure-verifier-mma3jryk/download' --output '.skill-downloads/test-failure-verifier-mma3jryk/SKILL.md.part' && mv '.skill-downloads/test-failure-verifier-mma3jryk/SKILL.md.part' '.skill-downloads/test-failure-verifier-mma3jryk/SKILL.md'2. Vérifier les prérequis
Lisez SKILL.md avant de l’utiliser. Si le fichier cite des scripts ou services externes, examinez-les et préparez les accès nécessaires dans votre environnement de test.
Outils déclarés par l’auteur (à vérifier dans votre agent) : Read,Glob,Grep
Aucune section de prérequis reconnue dans ce fichier. Cela ne signifie pas qu’il est autonome : les bibliothèques, outils et accès peuvent être cités ailleurs dans le contenu ou dans le dépôt source.
Les plateformes de la fiche sont des indications du catalogue. Les chemins ci-dessous suivent la documentation des outils ; ils ne prouvent pas que cette skill y a été exécutée. Aucune version minimale de ces outils n’est attestée pour cette fiche.
3. Charger la skill
Après vérification, copiez le dossier complet dans le projet avec l’une des commandes ci-dessous, puis ouvrez une nouvelle session de l’outil. La commande s’arrête si un dossier du même nom existe déjà : comparez les fichiers avant de le remplacer.
Claude Code
test -f '.skill-downloads/test-failure-verifier-mma3jryk/SKILL.md' && test -s '.skill-downloads/test-failure-verifier-mma3jryk/SKILL.md' && mkdir -p '.claude/skills' && test ! -e '.claude/skills/feature-verifier' && cp -R '.skill-downloads/test-failure-verifier-mma3jryk' '.claude/skills/feature-verifier'OpenSkills
OpenSkills doit déjà être installé. La procédure locale install/read est contrôlée avec OpenSkills 1.5.0, qui exige Node.js ≥ 20.6.0. Aucun slug du catalogue n’est résolu automatiquement.
Installation officielle d’OpenSkillsopenskills install './.skill-downloads/test-failure-verifier-mma3jryk'openskills read 'test-failure-verifier-mma3jryk'La lecture doit afficher le contenu du fichier installé et son dossier de base. Elle ne lance ni la skill ni ses dépendances.
Pour un agent qui lit AGENTS.md, synchronisez ensuite l’index. Cette commande modifie AGENTS.md : relisez le diff avant de l’utiliser.
openskills syncMode manuel ou autre outil : joignez SKILL.md à une conversation, ou ouvrez-le dans un agent capable de lire les fichiers. Ajoutez les ressources annexes nécessaires. Il n’existe pas de dossier universel reconnu par tous les outils.
4. Faire un premier essai
Utilisez une entrée courte et fictive : un endpoint d’API, un petit document ou un brief d’interface. Dans une nouvelle conversation, joignez le fichier ou donnez son chemin à l’agent, puis adaptez cette demande :
Lis .skill-downloads/test-failure-verifier-mma3jryk/SKILL.md et applique ses instructions à cet exemple : [décrire une entrée de test]. Indique les fichiers, dépendances ou accès qui manquent. Produis le résultat demandé par la skill sans inventer de données ni exécuter de script non examiné.Résultat attendu : une sortie correspondant aux instructions de la skill, ou une liste précise des prérequis manquants. Une simple confirmation de lecture ne valide pas le premier usage. Si une ressource externe est indisponible, ce parcours reste à tester.
Comparaison de performances ClickHouse
Testing
Évaluez les résultats de tests de performance ClickHouse, analysez les régressions de PR, comparez avec l'historique et vérifiez la fiabilité des mesures.
Analyse des rapports de performance CI
Testing
Analyse les rapports de comparaison de performance CI pour une PR ClickHouse. Recoupe l'historique master pour distinguer les vraies régressions des tests instables.
Méthode Santa
Testing
Vérification adversarial multi-agents avec deux réviseurs indépendants. La sortie est vérifiée deux fois et corrigée itérativement jusqu'à ce que les deux acceptent avant publication.