Che cos'è il rapporto Crawl Stats?
Il rapporto Crawl Stats è una funzione di Google Search Console che fornisce dati dettagliati su come Googlebot interagisce con il vostro sito web.
Vi aiuta a capire la frequenza con cui Google esegue il crawling delle vostre pagine, la quantità di dati scaricati e se il vostro server sta rispondendo in modo efficiente.
Il monitoraggio di questo report è fondamentale per la SEO tecnica, in quanto rivela se il budget per il crawling viene utilizzato in modo efficace o se viene sprecato per pagine non essenziali.
Perché il rapporto Crawl Stats è importante
Google assegna un crawl budget per ogni sito, un equilibrio tra il numero di URL che Googlebot vuole scansionare e la capacità del vostro server di gestirli.
Il rapporto Crawl Stats mostra se il budget viene speso per gli URL giusti ed evidenzia le inefficienze di crawling.
Vantaggi principali
- Identificare gli errori di crawling e i problemi del server.
- Rilevare il gonfiore degli URL o le pagine di parametri ridondanti.
- Misurare l'impatto della struttura del sito o degli aggiornamenti dei contenuti.
- Migliorare l'efficienza del crawling per i siti dinamici o di grandi dimensioni.
Dove trovarlo
È possibile accedervi tramite:
Google Search Console → Impostazioni → Statistiche crawl
Include tre sezioni principali:
- Panoramica delle richieste di crawling - Richieste totali, dimensioni del download e tempo medio di risposta.
- Ripartizione delle richieste di crawling: dati per codice di risposta, tipo di file, scopo e tipo di Googlebot.
- Stato dell'host: metriche sullo stato di salute del DNS, sulla disponibilità del server e sul recupero del file robots.txt.
Metriche chiave nel rapporto Crawl Stats
| Metrica | Descrizione |
|---|---|
| Richieste totali di crawling | Il numero totale di URL caricati in un periodo di tempo. |
| Dimensione totale del download | La quantità di dati scaricati da Googlebot. Valori elevati possono indicare supporti di grandi dimensioni o codice non ottimizzato. |
| Tempo medio di risposta | Il tempo che il vostro server impiega per rispondere a Googlebot. |
| Per codice di risposta | Ripartizione delle risposte di successo (200), reindirizzamento (301/302) ed errore (404/500). |
| Per tipo di file | Contenuto HTML, CSS, JS, immagini o video. |
| Per scopo | Tipo di crawl (refresh o discovery). |
| Per tipo di Googlebot | Desktop, mobile, immagine, video o AdsBot. |
Come utilizzare il rapporto Crawl Stats per la SEO
1. Rilevare le anomalie di crawl
Cercate i picchi improvvisi di errori 404 o 500, che segnalano link non funzionanti o instabilità del server.
2. Ottimizzare il budget del crawl
Assicuratevi che le pagine importanti (come i prodotti, gli articoli e le landing page) vengano crawlate frequentemente, mentre le pagine di basso valore o i parametri non lo sono.
3. Identificare i colli di bottiglia delle prestazioni
Un tempo di risposta costantemente elevato indica che Googlebot ha problemi con il vostro server o che avete bisogno di un CDN o di un livello di caching.
4. Tracciare le modifiche dopo una migrazione
Dopo la migrazione di un sito o la ristrutturazione di un URL, utilizzate il report per confermare che Googlebot sta scoprendo e scansionando i nuovi URL in modo efficiente.
Migliori pratiche
- Mantenete il file robots.txt pulito e aggiornato.
- Utilizzate i reindirizzamenti 301 per tutte le modifiche permanenti dell'URL.
- Riducete gli sprechi di crawl gestendo la navigazione sfaccettata e i parametri di query.
- Assicuratevi che il vostro server restituisca risposte coerenti di 200 OK per le pagine chiave.
- Utilizzate il Web Audit Tool di Ranktracker per effettuare un controllo incrociato dei dati di crawl e identificare tempestivamente i problemi.
Riepilogo
Il rapporto Crawl Stats è un potente strumento diagnostico per comprendere il comportamento di crawling di Googlebot.
Monitorando la frequenza di crawling, i tempi di risposta e gli errori, è possibile ottimizzare il modo in cui Google indicizza il sito, ottenendo una scoperta più rapida, prestazioni migliori e risultati SEO migliori.
