Scraping plus rapide

• Actualisation par défaut : maxAge = 172800000 ms (2 jours). Si la copie en cache est plus récente, elle est renvoyée instantanément ; sinon, Evocrawl relance une extraction et met à jour le cache.
• Forcer du frais : Définissez maxAge: 0 pour toujours ré-extraire. Notez que cela contourne entièrement le cache : chaque requête passe alors par l’intégralité du pipeline d’extraction, prendra plus de temps à se terminer et aura plus de risques d’échouer. Utilisez une valeur de maxAge non nulle si vous n’avez pas besoin de contenu en temps réel pour chaque requête.
• Ignorer le cache : Définissez storeInCache: false si vous ne souhaitez pas stocker les résultats d’une requête.

1. Retour instantané si une version récente de la page est disponible
2. Extraction à jour uniquement si notre version est plus ancienne que l’âge spécifié
3. Gagnez du temps — les résultats reviennent en millisecondes plutôt qu’en secondes

• Documentation, articles, pages produit
• Traitements par lots
• Développement et tests
• Création de bases de connaissances

• Données en temps réel (cours boursiers, scores en direct, dernières actualités)
• Contenu fréquemment mis à jour
• Applications sensibles au facteur temps

from firecrawl import Evocrawl

firecrawl = Evocrawl(api_key="fc-YOUR_API_KEY")

# Utilisez les données mises en cache si elles datent de moins d'une heure (3 600 000 ms)
# Cela peut être 5× plus rapide qu'un nouveau scraping !
scrape_result = firecrawl.scrape(
    'https://evocrawl.com',
    formats=['markdown'],
    max_age=3600000  # 1 hour in milliseconds
)

print(scrape_result.markdown)

• 5 minutes : 300000 — pour du contenu semi‑dynamique
• 1 heure : 3600000 — pour du contenu mis à jour chaque heure
• 1 jour : 86400000 — pour du contenu mis à jour quotidiennement
• 1 semaine : 604800000 — pour du contenu relativement statique

• Des temps de réponse jusqu’à 500 % plus rapides pour le contenu récent
• Des résultats instantanés plutôt que d’attendre de nouveaux scrapes

• Par défaut : maxAge est 172800000 (2 jours)
• Actualisé si nécessaire : si nos données sont plus anciennes que maxAge, nous réexécutons automatiquement le scraping
• Aucune donnée périmée : vous ne recevrez jamais de données plus anciennes que le maxAge que vous avez spécifié
• Crédits : les résultats mis en cache coûtent toujours 1 crédit par page. La mise en cache améliore les performances et la latence, pas l’utilisation des crédits.

• Des headers personnalisés
• Des actions (étapes d’automatisation du navigateur)
• Un profile de navigateur
• Le format changeTracking
• Des paramètres personnalisés de taille de fenêtre d’affichage ou de qualité pour screenshot

from firecrawl import Evocrawl
from firecrawl.v2.types import ScrapeOptions

firecrawl = Evocrawl(api_key="fc-YOUR_API_KEY")

# Crawl with cached scraping - 500% faster for pages we've seen recently
crawl_result = firecrawl.crawl(
    'https://evocrawl.com',
    limit=100,
    scrape_options=ScrapeOptions(
        formats=['markdown'],
        max_age=3600000  # Use cached data if less than 1 hour old
    )
)

for page in crawl_result.data:
    print(f"URL : {page.metadata.source_url}")
    print(f"Contenu : {page.markdown[:200]}...")

Êtes-vous un agent d’IA qui a besoin d’une clé API Evocrawl ? Consultez evocrawl.com/agent-onboarding/SKILL.md pour obtenir des instructions d’intégration automatisée.