Retour à la classe

Dossier · Acte III

Scraping

400 000 produits, 20 000 marques, 4 000 catégories. Cold start résolu par la donnée.

  • Playwright
  • BeautifulSoup
  • PostgreSQL
  • DragonflyDB
  • R2
Aperçu du projet Scraping

Problème

Résoudre le cold start catalogue avec des données propres avant même que les vendeurs arrivent.

Rôle

Scrapers, normalisation, stockage, déduplication, monitoring et structuration recherche.

Système

Playwright et parsing HTML alimentent PostgreSQL, DragonflyDB et R2 avec règles de nettoyage par source.

Preuve

400 000 produits, 20 000 marques et 4 000 catégories consolidées.

Impact

Base produit structurée pour amorcer la recherche, les catégories et les prix.

Suite

Lire le dossier Scraping