Crawler SEO tecnico: cosa fa e come sceglierne uno
Un crawler SEO tecnico legge un sito come fa un motore di ricerca e ti dice cosa lo ostacola. Ecco cosa dovrebbe controllare, i numeri dietro ogni controllo, cosa ha trovato un crawl completo del nostro sito e come scegliere un tool.
Cosa fa un crawler SEO tecnico
Un crawler SEO tecnico parte da un URL, lo scarica, legge i link e li segue, lo stesso ciclo che esegue Googlebot. Per ogni URL registra codice di stato, header, HTML, canonical, direttive robots e link in entrata e in uscita.
Il crawl è metà del lavoro. L'altra metà è confrontare le pagine tra loro e con le regole pubblicate dai motori di ricerca. Un link rotto è facile da vedere. Un canonical che punta a un redirect su 3.000 pagine prodotto no, ed è lì che un crawler dimostra il suo valore.
La maggior parte dei crawler legge anche le sitemap XML e il robots.txt, così mostra quali pagine il sito dichiara importanti, quali blocca e dove queste due versioni non concordano.
Cosa dovrebbe controllare un tool per l'audit SEO tecnico
Ogni crawler serio per il site audit copre le stesse aree principali. Eccole con l'obiettivo da raggiungere e il controllo di Neova che segnala quando non lo raggiungi.
| Area | Obiettivo | Controllo di Neova |
|---|---|---|
| Codici di stato | 0 link interni verso 4xx o 5xx | URL interno che restituisce 4xx, 5xx o nessuna risposta |
| Redirect | 1 salto, nessuna catena | Un URL interno è in una catena di redirect |
| Canonical | Puntano a un URL che risponde 200 | Il canonical punta a un URL in redirect |
| Dimensione della sitemap XML | 50.000 URL, 50 MB per file | Sitemap XML con oltre 50.000 voci |
| Copertura della sitemap XML | Ogni pagina indicizzabile elencata | Un URL indicizzabile non è in alcuna sitemap XML |
| robots.txt | 500 KiB letti da Google | Il robots.txt è irraggiungibile o troppo grande |
| Profondità di crawl | 3 clic o meno | L'URL indicizzabile è a profondità di crawl 4 o più |
| Title | 60 caratteri (default comune) | Tag title oltre i 60 caratteri |
| Meta description | 155 caratteri (default comune) | Meta description oltre i 155 caratteri |
| hreflang | Link di ritorno su ogni destinazione | Manca il link di ritorno hreflang |
I limiti rigidi vengono dalle fonti: 50.000 URL e 50 MB per file dal protocollo sitemaps.org, 500 KiB dalla specifica del robots.txt di Google, i link di ritorno dalla guida all'hreflang di Google. Le lunghezze di title e description sono default di visualizzazione, non regole: Google taglia in base alla larghezza in pixel, quindi trattale come Da controllare, non come Da correggere.
Per un percorso più lungo in ogni area, vedi la checklist per l'audit SEO tecnico su SEO ProCheck.
Cosa ha trovato un crawl completo del nostro sito
Abbiamo scansionato il nostro sito, seoprocheck.com, con Neova il 17 ottobre 2026, un crawl completo con le sitemap XML. Ecco i numeri.
| Misura | seoprocheck.com, 17 ott 2026 |
|---|---|
| URL scaricati | 10.222 |
| Tempo | 61 minuti |
| Pagine HTML che rispondono 200 | 4.561 |
| URL nelle sitemap XML | 1.835 |
| Raggiunti dai link, in nessuna sitemap | 2.727 |
| In una sitemap, non raggiunti da alcun link | 1 |
| Completezza | 99.98% |
| Body delle pagine | 1,66 GB grezzi, 340 MB salvati |
| Segnalazione | URL |
|---|---|
| Meta description oltre i 155 caratteri | 582 |
| Tag title oltre i 60 caratteri | 557 |
| Tag title duplicato tra pagine HTML | 56 |
| Canonical verso un altro URL interno | 5 |
| Immagine senza testo alt | 2 |
Due lezioni. Primo, le sitemap raccontavano metà della storia: 2.727 URL erano raggiungibili tramite link ma non elencati da nessuna parte, cosa che solo un crawl che segue i link e legge le sitemap può mostrare. Secondo, i conteggi più alti erano segnalazioni di lunghezza, che sono valutazioni caso per caso. I 5 canonical e i 2 testi alt mancanti sono meno numerosi ma più rapidi da sistemare. Ordina per ciò su cui una segnalazione incide, non per quanto è grande il suo numero.
Come fare un crawl SEO tecnico
- Scegli l'URL di partenza. Usa la versione della home page che risponde 200. Se anche http o l'altro host rispondono 200, hai già il primo problema da segnalare.
- Decidi il perimetro. L'intero sito, alcune cartelle o un campione di ogni template. Su un sito grande, un campione per template fa emergere i pattern più in fretta.
- Attiva le sitemap XML. Scansionarle dopo i link mostra le pagine che le sitemap elencano ma che nessun link raggiunge.
- Decidi se usare il rendering JavaScript. Su un sito basato su un framework, renderizza un campione e confrontalo con l'HTML grezzo.
- Imposta una velocità rispettosa. Pochi URL al secondo bastano. Vai più veloce solo su un sito tuo.
- Guarda i primi minuti. Se il numero di URL sale molto più in fretta del previsto, hai trovato una crawl trap: un calendario, un filtro a faccette o un ID di sessione. Escludila e prosegui.
- Leggi prima la sintesi. Parti dai problemi che toccano più pagine indicizzabili.
Alle prime armi? Il tuo primo crawl ti guida in Neova.
Leggere i risultati senza perdersi
Un audit completo di un sito medio può produrre migliaia di segnalazioni. La maggior parte viene da poche cause, di solito un template.
- Raggruppa per template. Se il 90% delle pagine prodotto condivide una segnalazione, è una correzione, non 4.000 ticket.
- Pesa in base al traffico. Una pagina rotta con clic dalla ricerca conta più di una che nessuno visita. Unisci i dati di Google Search Console al crawl.
- Separa Da correggere da Da controllare. Un 5xx su una pagina chiave va corretto. Un title che supera il limite di pochi caratteri è una valutazione caso per caso.
- Controlla la fonte. Quando uno sviluppatore chiede perché esiste una regola, rispondi con un documento di Google o del W3C. Il riferimento sui codici di stato HTTP di SEO ProCheck spiega cosa significa ogni codice di stato.
- Scansiona di nuovo dopo la correzione. Confrontare due crawl è l'unica prova che la correzione è andata online senza rompere nient'altro.

Come scegliere il miglior crawler SEO per te
Non esiste un unico miglior crawler SEO. Un freelance che fa audit su siti piccoli ha bisogno di qualcosa di diverso da un team interno con un milione di URL. Queste domande aiutano a decidere.
| Domanda | Cosa cercare | Neova |
|---|---|---|
| Dove gira? | I tuoi computer o un browser | |
| Quanto può essere grande un crawl? | Limite di URL, salvataggio su disco | Fino a 5 milioni di URL |
| Esegue il rendering del JavaScript? | Grezzo e renderizzato, affiancati | ✓ |
| I controlli sono spiegati? | Regola, significato, correzione, fonte | 694 controlli |
| Confronta i crawl? | URL nuovi, corretti, modificati | ✓ |
| Cosa c'è dopo? | Export, ticket, avvisi | ✓ |
| Si può provare gratis? | Un piano o una prova | 1.000 URL, ogni controllo |
I 5 milioni valgono per il piano Desktop e dipendono dal tuo computer. La nostra pagina di confronto mette Neova accanto a Screaming Frog, Sitebulb e altri, riga per riga, secondo la loro documentazione.
Come Neova fa il crawling SEO tecnico
Neova è un crawler SEO desktop per Mac (Apple silicon), Windows e Linux, con Neova Online nel browser sullo stesso account. Parte da un URL iniziale, ne segue i link e legge le sitemap XML, poi esegue 694 controlli. Ogni controllo dice quando segnala, cosa significa di solito e cosa potresti fare, e linka la sua fonte.
- Perimetro: un crawl completo, cartelle, un campione per gruppo di pagine o un elenco di URL.
- Rispettoso di default: 3 URL al secondo, rallenta da solo quando il server risponde 429 o 503.
- Ogni URL tracciato: ogni URL trovato finisce in un gruppo, e Scoperta propone di escludere una crawl trap senza fermarsi.
- Rendering: rendering JavaScript opzionale in Chrome, confrontato con l'HTML grezzo.
- Dopo il crawl: segnalazioni Da correggere e Da controllare, ticket per controllo e gruppo di pagine, un Piano d'azione, Confronta i crawl ed export dal CSV al PDF con il tuo brand.
La pagina delle funzionalità ha l'elenco completo, e Confronto lo affianca a quello degli altri crawler.
Una breve checklist per il crawl SEO tecnico
- Una sola versione della home page risponde 200; le altre fanno redirect verso di essa.
- Nessun link interno verso URL 4xx o 5xx.
- Nessuna catena o loop di redirect tra URL interni.
- I canonical puntano a URL indicizzabili che rispondono 200.
- Ogni pagina indicizzabile è in una sitemap XML, e nessun'altra vi compare.
- Nessuna pagina chiave oltre i 3 clic dalla home page.
- Nessuna pagina risponde 200 con un messaggio "non trovato". Vedi Il tag title o l'H1 contiene una frase da soft 404.
- Title, link e testo principale sono nell'HTML grezzo.
- Il robots.txt blocca solo ciò che deve bloccare.
Tieni aperta la guida di Google agli URL canonici mentre lavori, e le FAQ sull'audit SEO di SEO ProCheck per le domande che fanno i clienti.
Domande
Cos'è un crawler SEO tecnico?
Un programma che scarica un sito pagina per pagina, seguendo i link come fa un motore di ricerca, e registra codici di stato, direttive, canonical e link. Poi confronta quei dati con le regole dei motori di ricerca e segnala cosa ostacola scansione e indicizzazione.
Qual è il miglior crawler SEO?
Quello adatto ai tuoi siti. Confronta dove gira, quanto può essere grande un crawl, se renderizza JavaScript, quanto chiaramente spiega ogni risultato e se confronta i crawl. Provalo sul tuo sito prima di decidere.
Un crawler per il site audit è la stessa cosa di Google Search Console?
No. Search Console mostra cosa ha visto e fatto Google. Un crawler mostra cosa serve il tuo sito in questo momento, su ogni URL che riesce a raggiungere. Funzionano meglio insieme, ed è per questo che molti crawler uniscono i dati di Search Console al crawl.
Quanto dura un crawl SEO tecnico?
Dipende dalle dimensioni e dalla velocità che imposti. Il nostro crawl completo di seoprocheck.com ha scaricato 10.222 URL in 61 minuti il 17 ottobre 2026. Un campione per template richiede pochi minuti.
Ogni quanto devo fare un crawl SEO tecnico?
Dopo ogni rilascio importante, e ogni settimana per i siti che cambiano spesso. Confronta ogni crawl con il precedente così le modifiche saltano all'occhio.
Posso provare Neova gratis?
Sì. Il piano Free scansiona fino a 1.000 URL per crawl con ogni controllo, e il piano Desktop ha una prova di 14 giorni senza carta. Vedi i prezzi o scarica Neova.