Scraping web avec Sitepanda

VérifiéPrudence

Extrait le contenu principal d'un site web en Markdown à l'aide d'un navigateur headless.

Spar Skills Guide Bot
Data & IADébutant
28/07/2026
Claude CodeCursorWindsurfCodex
#web-scraping#markdown-extraction#headless-browser#content-summarization#url-fetching

Recommandé pour

Synthèse automatique

Ce skill permet à l'agent de récupérer le contenu d'une page web via le CLI Sitepanda et de l'extraire en Markdown pour l'analyser ou le résumer.

Points forts

  • Sortie directement en Markdown, immédiatement lisible et analysable par l'agent
  • Commande unique et simple (sitepanda scrape <URL> --silent --limit 1) qui limite le scraping à une seule page
  • Le scraping récursif est explicitement soumis à confirmation de l'utilisateur, ce qui évite les explorations longues et coûteuses
  • Consigne de synthèse intégrée pour les pages longues, ce qui garde les réponses concises

Limites

  • Le skill ne décrit que l'appel CLI : il ne précise ni l'installation de Sitepanda ni la gestion des erreurs ou des pages bloquées
  • Aucune indication sur les sites rendus entièrement en JavaScript, les paywalls ou les limites de débit
  • La qualité de l'extraction dépend entièrement de la détection du contenu principal par l'outil, sans possibilité de sélecteur personnalisé
Quand l'utiliser

À utiliser dès qu'un utilisateur fournit une URL et demande d'en récupérer, résumer ou expliquer le contenu.

Quand l'éviter

À éviter lorsqu'il faut explorer un site entier en profondeur ou scraper des pages nécessitant une authentification, car le skill ne couvre pas ces cas.

Analyse de sécurité

Prudence
Score qualité78/100

The skill performs legitimate web scraping using a headless browser, but it involves network access and an external command. While not inherently destructive or exfiltrating, it can be abused to reach internal resources or fetch malicious content, so caution is warranted.

Points d'attention
  • •Invokes an external network tool (`sitepanda`) to fetch and scrape URLs, which could be used to access internal or sensitive endpoints if an untrusted URL is supplied.
  • •No allowed-tools are declared despite relying on an external command, making execution scope unclear.
  • •Recursive scraping is gated by user confirmation, but single-page scraping of arbitrary URLs is not restricted.
Comment cette analyse est faite

Exemples

Summarize an article
Summarize the article at https://example.com/blog/post-123
Explain a docs page
What does this documentation page say? https://example.com/docs
Extract key points
Scrape https://example.com/pricing and list the key points of the pricing page.

name: sitepanda description: > Scrape websites with a headless browser and extract main readable content as Markdown. Use this skill when the user asks to retrieve, analyze, or summarize content from a URL or website.

Sitepanda (Web Scraping Tool)

Instructions

  1. When the user provides a URL or asks for website content, use Sitepanda to scrape the page.

  2. By default, use the following command to scrape a single page:

    sitepanda scrape <URL> --silent --limit 1

  3. If you need to perform recursive scraping (following links), you must ask the user for confirmation before starting, as it may take a long time.

  4. Capture the output, which is returned in Markdown format.

  5. Read and analyze the extracted content.

  6. Respond to the user using only the relevant information from the page.

  7. If the content is long, summarize or extract only the necessary sections.

Examples

Example 1

User request: "Please summarize the article at https://example.com/blog/post-123"

Agent behavior:

  • Use Sitepanda to scrape the page
  • Read the extracted Markdown
  • Summarize the main points in the response

Example 2

User request: "What does this documentation page say? https://example.com/docs"

Agent behavior:

  • Fetch the page using Sitepanda
  • Extract key sections
  • Explain the content concisely

Du fichier au premier essai

Le téléchargement contient exactement le contenu affiché sur cette fiche. Cette copie peut différer de la dernière version du dépôt source.

Consulter la source et ses fichiers annexes

Ce téléchargement contient uniquement SKILL.md. Les scripts, références, modèles et dépendances éventuels ne sont pas inclus. Récupérez les fichiers nécessaires depuis la source en conservant leur arborescence avant de poursuivre.

1. Télécharger le fichier

Télécharger SKILL.md

Depuis la racine d’un projet de test, enregistrez le fichier sous .skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md, ou utilisez la commande suivante. Ce dossier sert à examiner la skill avant son installation.

Commande pour macOS/Linux ou WSL : un shell POSIX et curl sont nécessaires. Sous Windows sans WSL, utilisez le bouton de téléchargement et créez le dossier manuellement.

mkdir -p '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs' && curl --fail --show-error --location 'https://skills-guides.com/api/skills/web-scraping-with-sitepanda-ms47vpjs/download' --output '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md.part' && mv '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md.part' '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md'

2. Vérifier les prérequis

Lisez SKILL.md avant de l’utiliser. Si le fichier cite des scripts ou services externes, examinez-les et préparez les accès nécessaires dans votre environnement de test.

Aucune section de prérequis reconnue dans ce fichier. Cela ne signifie pas qu’il est autonome : les bibliothèques, outils et accès peuvent être cités ailleurs dans le contenu ou dans le dépôt source.

Les plateformes de la fiche sont des indications du catalogue. Les chemins ci-dessous suivent la documentation des outils ; ils ne prouvent pas que cette skill y a été exécutée. Aucune version minimale de ces outils n’est attestée pour cette fiche.

3. Charger la skill

Après vérification, copiez le dossier complet dans le projet avec l’une des commandes ci-dessous, puis ouvrez une nouvelle session de l’outil. La commande s’arrête si un dossier du même nom existe déjà : comparez les fichiers avant de le remplacer.

Claude Code
test -f '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md' && test -s '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md' && mkdir -p '.claude/skills' && test ! -e '.claude/skills/sitepanda' && cp -R '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs' '.claude/skills/sitepanda'

Cursor
test -f '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md' && test -s '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md' && mkdir -p '.cursor/skills' && test ! -e '.cursor/skills/sitepanda' && cp -R '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs' '.cursor/skills/sitepanda'

Codex
test -f '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md' && test -s '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md' && mkdir -p '.agents/skills' && test ! -e '.agents/skills/sitepanda' && cp -R '.skill-downloads/web-scraping-with-sitepanda-ms47vpjs' '.agents/skills/sitepanda'

OpenSkills

OpenSkills doit déjà être installé. La procédure locale install/read est contrôlée avec OpenSkills 1.5.0, qui exige Node.js ≥ 20.6.0. Aucun slug du catalogue n’est résolu automatiquement.

Installation officielle d’OpenSkills
openskills install './.skill-downloads/web-scraping-with-sitepanda-ms47vpjs'

openskills read 'web-scraping-with-sitepanda-ms47vpjs'

La lecture doit afficher le contenu du fichier installé et son dossier de base. Elle ne lance ni la skill ni ses dépendances.

Pour un agent qui lit AGENTS.md, synchronisez ensuite l’index. Cette commande modifie AGENTS.md : relisez le diff avant de l’utiliser.

openskills sync

Mode manuel ou autre outil : joignez SKILL.md à une conversation, ou ouvrez-le dans un agent capable de lire les fichiers. Ajoutez les ressources annexes nécessaires. Il n’existe pas de dossier universel reconnu par tous les outils.

4. Faire un premier essai

Utilisez une entrée courte et fictive : un endpoint d’API, un petit document ou un brief d’interface. Dans une nouvelle conversation, joignez le fichier ou donnez son chemin à l’agent, puis adaptez cette demande :

Lis .skill-downloads/web-scraping-with-sitepanda-ms47vpjs/SKILL.md et applique ses instructions à cet exemple : [décrire une entrée de test]. Indique les fichiers, dépendances ou accès qui manquent. Produis le résultat demandé par la skill sans inventer de données ni exécuter de script non examiné.

Résultat attendu : une sortie correspondant aux instructions de la skill, ou une liste précise des prérequis manquants. Une simple confirmation de lecture ne valide pas le premier usage. Si une ressource externe est indisponible, ce parcours reste à tester.

Skills similaires