Pipeline di lead scraping
Lead generation per team di vendita B2B · Prototipo interattivo con dati di esempio, in autonomia
Aggiornato
Prima
Il team vendite costruiva le liste di lead a mano. Gli scraper semplici morivano al primo blocco.
Dopo
I job arrivano in fondo nonostante blocchi e pagine difettose, con i lead pronti tramite API.
- 1Persona:Operatore
Imposta un job in un wizard, con siti target, campi e pianificazione.
- 2Software:Scraper
Apre le pagine in un browser reale tramite proxy a rotazione.
- 3Software:Pipeline
Estrae i campi, li verifica, rimuove i duplicati e ritenta i fallimenti.
Persona:OperatoreSegue l'avanzamento e il log in tempo reale.
- 4Software:Piattaforma
Salva i lead, poi li rende disponibili tramite API e webhook.
Sempre attivo
- Una pagina fallita non ferma mai il job.
- La dashboard mostra in tempo reale lo stato dei proxy e gli errori.
- Le chiavi API sono limitate a un solo team.
Problema
Le liste di lead si costruivano a mano. Con grandi volumi gli scraper incontravano il rilevamento dei bot, richieste fallite e pagine incoerenti, e si fermavano con metà dei dati.
Diagnosi
A grandi volumi il fallimento è normale. La pipeline deve aspettarsi blocchi e pagine difettose, e andare avanti.
Opzioni valutate
Cosa succede quando una pagina fallisce?
Scelta
Ritentarla, poi spostarla in una lista dei falliti e lasciare girare il job
Una pagina errata costa un record, non l'intera esecuzione. Costo: qualcuno deve guardare la lista dei falliti.
Scartata
Fermare il job al primo errore
A grandi volumi qualche pagina fallisce sempre, quindi il job non finirebbe mai.
Soluzione
Il lato dell'operatore su job di esempio: un wizard per target, campi e pianificazione, avanzamento e log in tempo reale, stato dei proxy, e l'API e i webhook per i lead.
- Interfaccia
- Next.js
- React
- Tailwind CSS
- Recharts
- Framer Motion
- Rilascio
- Vitest
- Cloudflare Pages