Website Crawl Audit (Mini Site Crawler)
Questo audit crawl sito gratuito inizia da un URL, segue i link interni e controlla fino a 25 pagine entro un budget di 20 secondi. Il report elenca ogni pagina con il suo stato HTTP, titolo, descrizione e stato H1, redirect e tag noindex, e mostra i link interni che portano a pagine rotte. È un controllo rapido della salute, non un crawl completo.
Website Crawl Audit
Technical SEO
Informazioni su questo strumento
Un audit sito di solito inizia con un crawl, un robot che si muove da link a link come farebbe un motore di ricerca e registra quello che trova. Pagine rotte, catene di redirect, pagine senza titolo e pagine bloccate da un tag noindex casuale sono tutte facili da individuare una volta che i dati sono in una tabella, e molto difficili da individuare navigando.
Questo mini crawler inizia dall'indirizzo che inserisci e segue i link interni sullo stesso host, www e non-www trattati come uno. Si ferma a 25 pagine o 20 secondi, a seconda di quale viene raggiunto per primo, e rispetta le regole robots.txt per tutti i crawler. Per ogni pagina vedi il codice di stato, i salti di redirect, il titolo, se esistono una descrizione e un H1, e se la pagina è impostata su noindex. Una seconda tabella elenca i link interni che puntano a pagine che hanno restituito un errore.
È un campione, non un inventario. I siti grandi hanno migliaia di pagine, quindi il report mostra le pagine più vicine all'URL di partenza, che di solito sono le più importanti. I link a pagine oltre le 25 scansionate non vengono testati. Ogni crawl viene memorizzato nella cache per un'ora, e lo strumento condivide una piccola indennità di fetch oraria per visitatore, quindi eseguilo sulla pagina di partenza che conta di più.
Domande frequenti
Come sceglie il mini crawler quali pagine controllare?
Legge la pagina di partenza, raccoglie i suoi link interni, e li visita nell'ordine in cui appaiono, poi segue i link trovati su quelle pagine. Le pagine nella navigazione principale e vicino all'inizio vengono visitate per prime. Si ferma a 25 pagine o quando il budget di tempo di 20 secondi si esaurisce.
Perché il crawl si è fermato prima di 25 pagine?
O il budget di tempo di 20 secondi si è esaurito, il sito ha meno pagine raggiungibili attraverso link dalla pagina di partenza, robots.txt ne ha bloccate alcune, o l'indennità di fetch oraria per la tua connessione è stata utilizzata. Il report dice quale motivo si è applicato.
Che cos'è una catena di redirect e perché è importante?
Una catena di redirect è un URL che reindirizza a un altro URL che reindirizza di nuovo. Ogni salto aggiunge ritardo per i visitatori e i crawler, e le catene lunghe possono essere abbandonate. Aggiorna i link interni per puntare direttamente all'indirizzo finale, e mantieni i redirect a un salto.
È un sostituto di Screaming Frog o Search Console?
No. Un crawler desktop controlla ogni pagina, renderizza JavaScript ed esporta dati completi, e Search Console mostra quello che Google ha effettivamente scansionato e indicizzato. Usa questo strumento per una rapida prima occhiata a un sito, poi usa quelli per la profondità. È gratuito e non richiede installazione.