Verbena Contents Web Agency

Crawl Budget: definizione e ottimizzazione

Home » Crawl Budget: definizione e ottimizzazione

Crawl Budget: definizione e ottimizzazione

Negli ultimi anni si sono date a conoscere tante varianti della definizione di Crawl Budget, purtroppo, non sempre troppo chiare.

In questo articolo cerchiamo di ripassare insieme cosa significa crawl budget e come si ottimizza sulla base di quanto comunicato da Gary Illes di Google.

Prima di cominciare, se non gestisci un sito un sito con svariate migliaia di url, il crawl budget non ti deve assolutamente preoccupare. Già nel 2017 Google lo metteva in chiaro nel suo blog.

Cos’è il Crawl Budget?

Il Crawl Budget è una parte dell’algoritmo di Google che stabilisce quando e quante risorse devono essere impiegate nel crawling di una pagina web.

Il crawl budget viene influenzato dalla rilevanza degli url della web e al tempo stesso dalla “facilità” con cui Google Bot riesce ad addentrarsi nel sito.

Va da se che è importante la struttura degli url scelta per l’architettura di tutto il sito e l’efficienza dell’hosting in cui la web si alloggia.

N.B. – Giusto nel caso in cui non lo sapessi un crawler è un bot che esplora automaticamente una pagina web per estrarne informazioni. Questo sistema è utilizzato dai motori di ricerca per l’attività di posizionamento ma anche da altri siti. I siti che più comunemente utilizzano questo genere di tecnologia sono aggregatori di prezzi o siti di offerte.

Da cosa è influenzato il crawl budget?

Come si ottimizza il crawl budget?

Più che ottimizzare il crawl budget si tratta di aumentare il budget che Google alloca per l’esplorazione del nostro sito.

Detto in soldoni per migliorare l’esplorabilità del tuo sito è necessaria un po’ di manutenzione e al tempo stesso di miglioramenti nella seo.

Ridurre gli errori della web

Il crawl budget è influenzato da errori e complessità nella struttura della web. E’ qui che bisogna lavorare per aumentare le visite sul tuo sito.

Bisogna andare a scoprire tutte le pagine che contengono degli errori e applicare un 301 oppure un 200. Questi due codici sono gli unici accettabili per Google Bot.

E’ una manovra che si può fare andando a toccare il codice della web (in access.html) oppure con un plugin dedicato. Ovviamente il lavoro più pulito sarà sempre quello fatto a mano andando ad usare il codice.

Bloccare le parti inutili del tuo sito

All’interno di un sito internet, sono sempre presenti pagine perfettamente inutili.

  • Categorie
  • Tags
  • Pagine navigazionali senza testo
  • Pagine prodotto molto simili tra loro

Rispettando la struttura della tua web queste pagine dovrebbero essere bloccate tramite il file robot.txt.

Fare attenzione alle catene di 301

Può succedere che nel corso di varie ottimizzazioni venga applicato un redirect 301 a diverse pagine in diversi momenti. Bisogna assolutamente evitare di far rimbalzare il crawler da un 301 all’altro.

Questo perché quando il caro bot passa da una pagina e viene reindirizzato con un 301 mette quella pagina in una specie di lista di cose da fare. Non sempre quella pagina viene seguita all’istante.

Google non garantisce un timing specifico in questo genere di operazioni, pertanto nel caso in cui si trovasse nella situazione di seguire vari 301, non possiamo sapere quanto tarderà per arrivare ad indicizzare la pagina che realmente ci interessa.

Aumenta i tuoi link

L’algoritmo di Google si basa sui link, aumentare il numero di link che puntano alla tua web aiuterà Google a capire che vale la pena esplorare la tua web e ne aumenterà l’autorità.

Lascia un commento

Dicono di noi

Alexis SancilioAlexis Sancilio
18:56 29 Jun 22
Li ho contattati per la realizzazione di un video su di me per motivi lavorativi.Si sono mostrati subito disponibili nel fissare un appuntamento. Hanno portato attrezzatura professionale. Sono stati gentilissimi e hanno anche condiviso i loro consigli da esperti per come realizzare il video nel migliore dei modi.Il video è stato montato in tempi record e il risultato è ben al di sopra delle mie aspettative iniziali. Dalla musica scelta come sottofondo alle luci e contrasti, dalla qualità e pulizia dell’audio mentre parlo alla qualità del video stesso.Li consiglio vivamente a chiunque avesse bisogno!
Francesco PassarellaFrancesco Passarella
19:12 24 Jan 22
Eccellenti professionisti sia nella consulenza marketing che nella realizzazione di siti web dinamici.. molto disponibili e cordiali
Professionisti col sorriso!Empatici per capire i tuoi punti di visti, pazienti nello spiegare le strategie, proattivi nel trovare le soluzioni migliori. Noi abbiamo lavorato insieme per sponsorizzare le attività di cicloturismo (inventando di sana pianta una storia simpatica da raccontare) e per il marketing di una masseria della zona trasformata in villa privata.Promossi :-)
Teddy WiggaTeddy Wigga
13:10 06 Oct 21
Assolutamente consigliato! Gli unici a essere in grado di risolvere il mio problema, tra l’altro, anche in pochissimo tempo! Grazie mille , sono pienamente soddisfatto !
Antonio Di SalvatoreAntonio Di Salvatore
13:33 08 Feb 21
Professionalità elasticità e una grande fonte di idee.. Li consiglierei a chiunque voglia pubblicizzare un attività un idea un profilo... Sanno quello che fanno e non lasciano nulla al casa. Nel mio caso in questo periodo di crisi dovuta al covid ho incrementato cmq il mio fatturato. . Grandi ragazzi continuate cosi. .
Alexis SancilioAlexis Sancilio
18:56 29 Jun 22
Li ho contattati per la realizzazione di un video su di me per motivi lavorativi.Si sono mostrati subito disponibili nel fissare un appuntamento. Hanno portato attrezzatura professionale. Sono stati gentilissimi e hanno anche condiviso i loro consigli da esperti per come realizzare il video nel migliore dei modi.Il video è stato montato in tempi record e il risultato è ben al di sopra delle mie aspettative iniziali. Dalla musica scelta come sottofondo alle luci e contrasti, dalla qualità e pulizia dell’audio mentre parlo alla qualità del video stesso.Li consiglio vivamente a chiunque avesse bisogno!
Neus BastidaNeus Bastida
13:05 02 Mar 22
Professionals with great empathy who have managed to capture perfectly what I imagined for my website. In addition, they are always on the lookout for maintenance and small improvements that can be made to improve visibility. Thank you guys !!
Francesco PassarellaFrancesco Passarella
19:12 24 Jan 22
Excellent professionals both in marketing consultancy and in the creation of dynamic websites .. very helpful and friendly
Francesco PassarellaFrancesco Passarella
19:12 24 Jan 22
Eccellenti professionisti sia nella consulenza marketing che nella realizzazione di siti web dinamici.. molto disponibili e cordiali
We are very happy with the work of Verbena Contents in our organization. For 5 years we have managed social networks and all digital content in a creative and efficient way. Super recommended!!
Míriam CampsMíriam Camps
14:56 24 Jan 22
Very professional and patient in advising for the creation of the website. They guided us at all times on the best way to communicate what we wanted to convey and resolved all the doubts that arose. Communication was fluid throughout the process. We are delighted with the result!
Professionisti col sorriso!Empatici per capire i tuoi punti di visti, pazienti nello spiegare le strategie, proattivi nel trovare le soluzioni migliori. Noi abbiamo lavorato insieme per sponsorizzare le attività di cicloturismo (inventando di sana pianta una storia simpatica da raccontare) e per il marketing di una masseria della zona trasformata in villa privata.Promossi :-)
Professionals with a smile!Empathic to understand your points of view, patient in explaining the strategies, proactive in finding the best solutions. We worked together to sponsor cycle tourism activities (inventing from scratch a nice story to tell) and for the marketing of a farm in the area transformed into a private villa.Promoted :-)
Teddy WiggaTeddy Wigga
13:10 06 Oct 21
Assolutamente consigliato! Gli unici a essere in grado di risolvere il mio problema, tra l’altro, anche in pochissimo tempo! Grazie mille , sono pienamente soddisfatto !
Antonio Di SalvatoreAntonio Di Salvatore
13:33 08 Feb 21
Professionalità elasticità e una grande fonte di idee.. Li consiglierei a chiunque voglia pubblicizzare un attività un idea un profilo... Sanno quello che fanno e non lasciano nulla al casa. Nel mio caso in questo periodo di crisi dovuta al covid ho incrementato cmq il mio fatturato. . Grandi ragazzi continuate cosi. .
js_loader