Cos'è il Crawl Budget e perché è importante nella SEO?

Pubblicato: 2020-07-29

Il crawl budget è una delle parti più indebolite del settore SEO ed è spesso considerata una caratteristica antica e dormiente dai marchi di tutto il mondo. Al contrario, il crawl budget si è evoluto secondo i moderni standard del settore e gli algoritmi di Google per renderlo più significativo nel tempo.

Secondo Google, un budget di scansione è la somma del limite di velocità di scansione dei tuoi siti Web (che garantisce che Googlebot o altri bot non eseguano la scansione delle tue pagine Web troppo, causando danni); e la domanda di scansione (che definisce quanto Google vuole eseguire la scansione delle pagine).

Tuttavia, il crawl budget aiuta a comprendere l'attenzione o il peso che i motori di ricerca forniscono al tuo sito web. Diversi programmi per computer sono stati programmati per raccogliere informazioni da pagine web, note come bot, crawler, ragni web, ecc. Può aiutare a decidere il numero di pagine che Google eseguirà la scansione del tuo sito web in un giorno e non ha limiti fissi poiché questi può eseguire la scansione da 1 a 40.00.000 o più pagine in un giorno.

Pertanto, è essenziale ottimizzare il crawl budget per raccogliere informazioni migliori sulle pagine aggiornate del sito Web, analizzarne la qualità dei contenuti e inviare i dati ad altri motori di ricerca. Pertanto, migliore è il crawl budget, più rapide saranno le informazioni riflesse negli indici dei motori di ricerca, che possono apportare modifiche al tuo sito web. Per saperne di più sulla SEO tecnica, dai un'occhiata ai nostri corsi di marketing digitale.

Per comprendere meglio il crawl budget , analizziamo prima di tutto il processo di scansione .

Per saperne di più: SEO tecnico: 7 best practice da implementare in questo momento

Sommario

Budget di scansione in termini di SEO

È un termine relativo ampiamente utilizzato nel settore SEO per rappresentare le varie metodologie e concetti necessari per la scansione dei bot. Le tecniche possono dipendere dal numero e dal tipo di pagine che i bot scansionano. I motori di ricerca assegnano budget di scansione ai siti Web perché ci sono siti Web illimitati online, ma ci sono risorse limitate dal punto di vista della pagina del motore di ricerca per coprire e raccogliere dati dalle stesse.

Il budget può aiutarli a distribuire la loro attenzione su numerosi siti Web e dare priorità al loro evento di scansione . Il budget di scansione che viene assegnato dalle pagine dei motori di ricerca viene deciso in base ai seguenti fattori:

  • Limite di scansione : la frequenza di scansione di un sito Web che può gestire e le preferenze del suo proprietario.
  • Domanda di scansione : quale degli URL del sito web vale la pena scansionare, in base alla sua popolarità e pertinenza

Poiché c'è molta confusione in merito al crawl budget , molti marchi spesso sottoutilizzano o trascurano inconsapevolmente il crawl budget assegnato al tuo sito web, causando più danni alla loro strategia SEO online e ai risultati SERP.

Ogni giorno, il crawler viene assegnato a un elenco di URL e deve coprire ogni URL in modo sistematico. Per questo, il crawler dovrebbe acquisire il file robots.txt in modo tempestivo per capire se può ancora eseguire la scansione di ciascuno degli URL forniti e iniziare a eseguire la scansione uno dopo l'altro. Non esiste una ragione predefinita per cui Google ritenga un sito web degno di essere scansionato, ma fattori come l'aggiornamento delle mappe del sito XML e nuovi backlink possono influenzare la scansione e sfruttarla al meglio.

Quindi, a cosa si riferisce il termine "budget" nel Crawl budget? È qualcosa legato alle finanze?

Il termine "budget" di scansione è un termine indefinito utilizzato per descrivere la frequenza con cui i bot visitano il sito Web e le pagine che visita per prime. Il budget può essere un effetto combinato di molti fattori come la domanda di scansione, la velocità di scansione , come discusso in precedenza.

La scansione ha molta importanza per i marchi con siti Web più grandi, con molte pagine di destinazione, come per un sito Web di eCommerce come Amazon, quando aggiunge nuove sezioni/categorie al suo sito Web, che a sua volta contiene migliaia di pagine. Questo è lo scenario ideale quando avresti bisogno del budget di scansione per ottenere rapidamente l'indicizzazione di tutte queste pagine. Tuttavia, avere troppe catene di reindirizzamento può anche influire sul budget di scansione.

Perché i crawl budget sono importanti?

È così importante perché vuoi che i motori di ricerca indicizzino rapidamente le tue pagine, aggiornino quella esistente e presto i visitatori su quelle pagine inizino a convertire. Senza la scansione attiva, i tuoi visitatori potrebbero non essere mai in grado di conoscere o effettuare un acquisto sul tuo sito Web per prodotti più nuovi e aggiornati, rimanere sconosciuti e sprecare inutilmente il tuo budget di scansione . Ci sono anche modi per vedere il budget di scansione per il tuo sito web se verificato su Google Search Console. Ecco come:

  • Innanzitutto, accedi a Google Search Console e scegli il sito web per il quale desideri conoscere il crawl budget .
  • In secondo luogo, passa a Scansione > Statistiche di scansione, dove puoi vedere il numero di pagine che Google scansiona ogni giorno.

Ad esempio, se vedi che il budget di scansione medio è di 70 pagine al giorno e rimane lo stesso, il budget di scansione mensile sarebbe (70 pagine) x (30 giorni) = 2100 pagine in un mese.

Google afferma che con milioni di siti Web scansionati ogni giorno, le pagine con un crawl budget più elevato ottengono maggiore attenzione dai crawler e attirano il bot a ispezionare quelle pagine, senza aumentare direttamente le attività SEO, ma soprattutto a vantaggio degli imprenditori.

Leggi: Tutorial di marketing digitale

Ottimizzazione del budget di scansione

Ci sono modi in cui puoi assicurarti che i tuoi crawl budget non vengano più sprecati, seguendo le migliori pratiche del settore. Di seguito sono riportati alcuni dei motivi più comuni per tenere sotto controllo e ottimizzare il budget di scansione :

  • URL accessibili: assicurati che nessun URL salvi alcun parametro per una selezione più ampia nel filtro del prodotto.
  • Buona velocità del sito: con una maggiore velocità di caricamento della pagina, le possibilità di aumentare la velocità di scansione aumentano e mantiene l'esperienza dell'utente massimizzata
  • Collegamenti interni: Google ama i siti Web collegati tra loro a molte pagine all'interno del sito, con puntatori sparsi ovunque. Inoltre, è a causa del collegamento interno che Googlebot visita tutte le pagine del tuo sito web che devi indicizzare.
  • Nessuna scarsa qualità dei contenuti: le pagine con una scarsa qualità o con pochi contenuti non aggiungono alcun valore al sito Web e possono influire sulla velocità di scansione complessiva del sito Web .
  • Architettura del sito Web piatta: più popolare è il tuo sito Web, maggiore è l'autorità di collegamento che hai. Pertanto, un'architettura del sito Web piatta aiuta a sfruttare l'autorità del collegamento a tutte le pagine del sito Web e attira maggiore attenzione dai crawler del sito Web.
  • Limitazione dei contenuti duplicati: Google si risente delle pagine di contenuto copiate o duplicate e, pertanto, la presenza di tali pagine sul tuo sito Web potrebbe influire sul budget e sulla frequenza complessivi della scansione.
  • Nessuna pagina orfana: è incredibilmente cruciale per il tuo sito web avere numerosi link interni ed esterni su tutte le sue pagine di destinazione. Senza tali collegamenti, una pagina viene chiamata "Pagina orfana" che spesso viene deindicizzata o impiega molto tempo a Google per scoprire tali pagine nei risultati dei motori di ricerca.

Leggi anche: Devi leggere 73 domande e risposte sull'intervista di Google Analytics

Conclusione

Il budget di scansione è, era e sarà probabilmente uno degli elementi più critici in termini di indicizzazione e visibilità di un sito Web nelle pagine dei risultati dei motori di ricerca nel tempo. Ogni professionista SEO deve trovare il modo e tenere d'occhio l' ottimizzazione del crawl budget che indirettamente porta a una migliore presenza SEO di qualsiasi marchio.

Se vuoi fare il tuo marketing digitale pratico, dai un'occhiata al certificato avanzato in marketing digitale e

Cos'è il Crawl Budget?

Budget di scansione è il numero di pagine che Google esegue la scansione di un sito in un dato giorno. Google non sempre spia istantaneamente ogni pagina del tuo sito. In effetti, a volte, possono essere necessarie settimane, il che potrebbe intralciare i tuoi sforzi SEO. A questo punto, è il momento di ottimizzare il tuo crawl budget.

Il numero di pagine che Google "scansiona" è il tuo "budget". Questo di solito è accertato dalle dimensioni e dallo stato del tuo sito, nonché dal numero di link al tuo sito.

Come determinare se il tuo sito ha un problema con il budget di scansione?

Per capire se il tuo sito ha un problema con il Crawl Budget, conta innanzitutto il numero di pagine che hai sul tuo sito. Puoi fare riferimento alla mappa del sito XML per avere una visione a volo d'uccello di questo. In secondo luogo, vai su Google Search Console, vai su Strumenti legacy e fai clic su "Stato scansione". Quindi prendi nota del numero medio di pagine scansionate al giorno. Infine, dividi il numero di pagine per il numero medio di scansioni al giorno.

Un numero maggiore di 10 indica che il tuo sito ha 10 volte più pagine di quelle che Google è in grado di scansionare. Pertanto, è necessaria l'ottimizzazione del budget di scansione.

Come ottimizzare il budget di scansione?

L'ottimizzazione del budget di scansione significa assicurarsi che nessun budget di scansione venga sprecato. In sostanza, include la correzione dei motivi dello spreco di Crawl Budget. Per aiutarti a ottimizzare il tuo Crawl Budget, ci sono alcune pagine standard che devi evitare per evitare lo spreco del tuo Crawl Budget. Usa URL accessibili con parametri.