Come ottimizzare il tuo budget di scansione

Che cos'è Crawl Budget?

Ci sono miliardi di pagine web. Questo numero rende in qualche modo impraticabile per Googlebot di eseguirne la scansione ogni secondo, ogni giorno. In questo modo si otterrebbe una quantità estremamente elevata di larghezza di banda consumata online. Questo, a sua volta, porterebbe a siti web più lenti. Per eliminare questa situazione, Google suddivide in porzioni un budget per ogni sito web. Il budget stanziato determina il numero di volte in cui Googlebot esegue il crawling del sito web mentre cerca le pagine da indicizzare. 

bilancio strisciante

Un Googlebot, d'altra parte, è un proxy automatico che si sposta all'interno di un sito alla ricerca di pagine che devono essere aggiunte al suo indice. E' qualcosa che si comporta come un navigatore digitale. Conoscere Googlebot e come funziona è solo un passo per aiutarti a capire l'idea dei budget di scansione per il processo SEO. 

 

Perché è importante il limite della velocità di scansione

Questo concetto ha alcune differenze rispetto al bilancio di strisciare. Il limite della velocità di scansione definisce il numero di connessioni simultanee che Googlebot utilizza per eseguire la scansione dei siti e il tempo necessario per recuperare un'altra pagina. Si noti che Google si concentra sull'esperienza utente. Il Googlebot, quindi, utilizza il limite della velocità di scansione. Questo limite impedisce ai siti di essere sopraffatti dagli agenti automatici nella misura in cui gli utenti umani trovano difficile caricare un sito sul proprio browser web. 

Alcuni fattori influenzeranno il crawl rate. Alcuni di loro includono:

  • Velocità del sito web - Se i siti web rispondono rapidamente a Googlebot, Google estenderà il tasso limite di crawl. Google ridurrà poi il tasso di crawl per altri siti web pigri.
  • Impostazioni nella console di ricerca - Uno sviluppatore web o un architetto può impostare i limiti di scansione attraverso la console di ricerca. Se un webmaster pensa che Google abbia superato il crawling sul proprio server, potrebbe diminuire il tasso di crawl, ma non può aumentarlo.

Si noti che, un tasso di scansione sano può ottenere le pagine indicizzate più velocemente, ma un tasso di scansione più alto non è un fattore di ranking. 

 

La richiesta di Crawl.

Il limite del crawl rate potrebbe non essere raggiunto, ma l'attività di Google sarà comunque ridotta se la domanda di indicizzazione non è presente. Questa riduzione di attività da parte di Googlebot è chiamata riduzione della domanda di crawl. I due fattori che determinano in modo significativo la domanda di crawl rate sono:

  • Popolarità - Gli URL che sono popolari su Internet vengono scansionati frequentemente per mantenerli sempre freschi nell'indice di Google.
  • Staleness - I sistemi Google di solito cercano di evitare che gli URL diventino stantii nel suo indice.

Inoltre, incidenti in tutto il sito, come gli spostamenti del sito, possono attivare un aumento della domanda di scansione. Questo succede per reindicizzare il contenuto del sito nei nuovi URL. 

Quali fattori influenzano il Crawl Budget per il SEO?

Un crawl budget combina la domanda di crawl e il crawl rate. Questa combinazione è quella che Google definisce come il numero totale di URL che Googlebot è disposto e in grado di eseguire la scansione. Google ha identificato gli esatti fattori che influenzano il crawl budget. Ecco l'elenco di questi fattori: 

Parametri URL - Questo è soprattutto il caso in cui l'URL di base aggiunto con i parametri restituisce la stessa pagina. Questo tipo di configurazione può portare a diversi URL unici che contano verso un budget di crawl anche se questi URL restituiscono ancora la stessa pagina.

Pagine di errore soft - Queste pagine di errore hanno anche un impatto sul budget della scansione. Tuttavia, essi sono riportati anche nella Console di ricerca.

Duplicare i contenuti - A volte, gli URL possono essere unici senza parametri di richiesta, ma restituire lo stesso contenuto web.

Pagine pirata - I siti pirata di solito hanno il loro budget di scansione limitato.

Contenuti di bassa qualità - Google probabilmente limiterà il budget di scansione per i siti che soffrono di scarsa qualità.

Impaginazione senza fine - I siti con link sconfinati troveranno che Googlebot spende gran parte del suo budget per i link che potrebbero non essere importanti.

 

Come utilizzare in modo efficace il tuo budget di Crawl.

Ci sono diversi modi in cui è possibile utilizzare il know-how del crawl budget per ottimizzare il tuo sito in modo adeguato. Ecco alcuni dei modi per farlo. 

Utilizzate Google Search Console
Google Search Console vi fornisce molte informazioni sui problemi che potrebbero influire negativamente sul vostro budget per la ricerca. Potete utilizzare le informazioni e configurarle per i siti che state monitorando. Dovreste poi controllare regolarmente con gli strumenti per vedere se i vostri siti web hanno dei problemi.

FandangoSEO
Con FandandandgoSEO puoi anticipare che GoogleBot trovi altri problemi che potrebbero influenzare il tuo budget di crawl.

Ensure Your Pages Are Crawlable
Non dovreste lasciare che la potenza della tecnologia moderna vi inganni al punto da rendere difficile per Googlebot strisciare il vostro sito web. Fate un progetto di crawl con il nostro strumento e controllate che le pagine siano crawlable per i robot dei motori di ricerca.

Limit Redirects
Ogni volta che una pagina del tuo sito vienereindirizzata, utilizza una piccola parte del tuo budget di crawl. Questo significa che se si ottengono troppi reindirizzamenti, il budget di crawl assegnato a voi potrebbe esaurirsi anche prima che Googlebot strisci le pagine da indicizzare.

Altri modi includono: 

  • Eliminazione dei collegamenti interrotti
  • Evitare l'uso dei parametri URL.
  • Uso del collegamento interno
  • Uso del collegamento esterno
  • Miglioramento della velocità del server
  • Caching delle pagine
  • Ottimizzazione della velocità di caricamento della pagina


Rileva tutti questi problemi SEO con FandangoSEO

Non sprecare il tuo budget per il crawl

Prova gratuita per 14 giorni

Accesso completo a tutte le nostre funzioni. Nessun obbligo di sorta.

Per iniziare

Arrow-up