Crawl Budget

Il Crawl Budget altro non è che il numero di risorse messo a disposizione da Google per il vostro sito. In un mondo di risorse finite, anche Google fa economia e impiega le proprie risorse a scansionare i siti più attivi e, secondo il suo punto di vista, migliori.
Facendo un parallelo, è come se sul vostro conto bancario ci fossero solo 1.000 euro e nel mese dovete decidere a cosa destinarli, suddividendo in quote questo capitale. Ecco quindi che voi destinerete la maggiorparte del vostro capitale per l'abitazione e per il cibo.Google, da un certo punto di vista, fa la stessa cosa.

Ovviamente il crawl budget non è inteso in termini economici ma di risorse. Diciamo, per semplificare molto, che abbia a disposizione 10 server (se così fosse non si chiamerebbe Google, ma per ora accettate questa semplificazione) e questi hanno un potere di calcolo, di memoria e di velocità per scansionare pagine in giro per il Web. Con questi 10 server Google andrà a guardare 50 siti web e per ognuno di questi destinerà una quota di risorse. Allo stesso modo, all'interno di ognuno di questi domini, Google destinerà una sottoquota per ogni tipologia di pagina.

Parametri per calcolare il crawl budget

Google semplifica il calcolo restituendo il feedback su 3 parametri differenti:

• Velocità media delle pagine
• Peso delle pagine
• Popolarità/Aggiornamenti del sito

Partiamo proprio da quest'ultimo parametro, e mettiamo il caso di avere tra le mani un sito che si aggiorna spesso e che è molto popolare (cioè che ha molti link in ingresso). Diciamo che Google assegna 100 risorse a questo sito (accettate anche qua la semplificazione).

Google come scansiona il mio sito?

Per comprendere come viene sfruttato il crawl budget, facciamo due esempi. Primo esempio: Google inizierà a scansionare il sito e vedrà pagine molto veloci e che pesano poco, quindi riuscirà a scansionare 1.000 pagine al giorno. Poniamo invece il caso che le pagine siano lente e pesanti, ecco che Google, quelle 100 risorse, le brucerà velocemente e riuscirà a scansionare solo 50 pagine al giorno.

Il crawl budget a me destinato è sufficiente?

La risposta è: dipende. Abbiamo visto i due differenti casi di uso di Crawl Budget. Poniamo di avere un sito con 10 pagine, ecco quindi che le risorse sono sufficienti in entrambi i casi. Poniamo invece di avere un sito con 10.000 pagine, ecco quindi che le risorse sono fortemente insufficienti, in entrambi i casi.