Che cos'è il rigonfiamento dell'indice e come risolverlo?   

In qualità di specialista SEO, potresti aver dedicato molti sforzi all'ottimizzazione del nuovo materiale, ma non stai ancora raggiungendo il tuo potenziale di posizionamento. Potrebbe essere perché trascuri una minaccia invisibile: il gonfiore dell’indice.

Il gonfiamento degli indici pone problemi sia ai motori di ricerca che ai proprietari di siti web. Ostacola lo sforzo degli algoritmi dei motori di ricerca di riconoscere informazioni utili, con conseguente minor numero di scansioni del sito. 

Inoltre, nasconde materiale di alta qualità dietro pagine meno utili, riducendo l'esposizione del tuo sito e il potenziale di posizionamento totale.

Fortunatamente, affrontare il gonfiore dell’indice è semplice. Esamineremo il gonfiamento dell'indice, il suo impatto sui budget di scansione e le soluzioni pratiche per farlo aumentare l'esposizione online del tuo sito web.     

Che cos'è il rigonfiamento dell'indice? 

L'aumento dell'indice si verifica quando il tuo sito web contiene dozzine, centinaia o migliaia di pagine di bassa qualità indicizzate da Google che non offrono alcuna utilità ai potenziali visitatori.

Ciò porta i crawler di ricerca a dedicare troppo tempo alla ricerca tra pagine irrilevanti del tuo sito anziché concentrare i propri sforzi su siti che apportano vantaggi alla tua attività. Fornisce inoltre un'esperienza utente terribile per i visitatori del tuo sito web.

L'aumento dell'indice si verifica frequentemente sui siti di e-commerce con un numero enorme di prodotti, categorie e recensioni degli utenti. Le pagine di bassa qualità indicizzate dai motori di ricerca potrebbero sopraffare il sito a causa di difficoltà tecniche.

In breve, l’aumento dell’indice rallenta il tuo sito e spreca i fondi per la scansione. Mantenere un sito web pulito garantisce che i motori di ricerca indicizzino solo gli URL che desideri che gli utenti trovino.

Gonfiore dell'indice in azione: un esempio

Qualche anno fa, avevamo programmato di lavorare su un sito di e-commerce con approssimativamente pagine 10000.

Quando abbiamo visitato Google Search Console, siamo rimasti sorpresi nello scoprire che Google aveva indicizzato 38000 pagine per il nostro dominio. Era decisamente troppo alto considerando le dimensioni del luogo. 

(Suggerimento: puoi scoprire queste cifre per il tuo sito in "Search Console" > "Indicizzazione" > "Pagine".)

Quel numero è aumentato considerevolmente in un breve periodo. Inizialmente, Google Analytics indicizzava 16000 pagine.

Cosa stava succedendo?

Il software del sito ha creato centinaia di pagine di prodotti superflue. 

Ad alto livello, se il sito web esauriva l’inventario di un marchio (cosa che accadeva frequentemente), l’algoritmo di impaginazione generava centinaia di pagine aggiuntive. 

Come risultato del bug, l’indicizzazione del sito web è salita alle stelle e le prestazioni SEO ne hanno risentito. 

Ingrossamento dell'indice: perché è importante?

L'aumento dell'indice gonfia la presenza nei motori di ricerca con contenuti che non forniscono alcuno scopo o sono irrilevanti per i visitatori.

Quando i robot di ricerca indicizzano queste pagine irrilevanti, è:

• I motori di ricerca hanno più difficoltà a classificare i tuoi siti. I crawler di ricerca devono comprendere il tuo sito web per abbinare accuratamente i contenuti alle richieste degli utenti e classificarli. Le pagine prive di uno scopo chiaro e logico rendono più difficile per Google e altri motori di ricerca comprendere e ottenere informazioni.

• Influisce negativamente sul posizionamento nei motori di ricerca. Quando le pagine con contenuti comparabili prendono di mira le stesse parole chiave, competono tra loro. Pagine di bassa qualità o contenuti duplicati potrebbero non riuscire a classificare o interessare i lettori, riducendo l'autorità complessiva del tuo sito.

• Utilizzo inefficiente del crawl budget. L'aumento dell'indice fa sì che i robot di ricerca sprechino il loro budget limitato per la scansione acquisendo materiale che Google non richiede. Ciò distoglie tempo e risorse dalle pagine per le quali desideri posizionarti.

Come diagnosticare il gonfiore dell'indice?

Il rapporto sulla copertura di Google Search Console è una delle tecniche più rapide e affidabili per scoprire i tipi di pagina che causano il rigonfiamento dell'indice.

Gli URL indicizzati ma non inviati alla mappa del sito XML, presupponendo che la mappa del sito segua le migliori pratiche SEO e contenga solo URL rilevanti per la SEO.

Utilizza uno strumento di scansione illimitato per trovare il numero di URL indicizzabili se le tue sitemap XML non rappresentano in modo ottimale pagine legittime.

Se hai molte più pagine legittime rispetto agli URL sottoposti a scansione, stai sicuramente riscontrando un rigonfiamento dell'indice.

Non utilizzare il sito: ricerca avanzata con operatore per contare il numero di pagine indicizzate; è abbastanza impreciso.

Una volta trovate le pagine di basso valore da deindicizzare, fai un controllo incrociato degli URL con i dati di Google Analytics per determinare l'impatto previsto sul traffico organico.

Data la loro natura, di solito non hanno alcun impatto dannoso, ma è essenziale ricontrollarli prima di procedere con la deindicizzazione su larga scala.

In che modo il rigonfiamento dell'indice influisce sulle prestazioni SEO?

Con oltre 1.13 miliardi di siti web online, i motori di ricerca hanno un “ristretto”budget per la ricerca per indicizzazione" per ognuno. Significa che possono visualizzare e analizzare solo un determinato numero di pagine in un determinato intervallo di tempo. 

Le pagine chiave del tuo sito vengono sottoposte a scansione ma non indicizzate a causa del sovraccarico dell'indice e, se il budget si esaurisce, il processo di indicizzazione cesserà.

Di conseguenza, il contenuto richiederà più tempo apparire sulle SERP, danneggiando così il posizionamento del tuo sito web e diminuendo i tassi di conversione. 

Il tuo sito web ha un numero limitato di pagine indicizzate da Google, a parte i vincoli di budget per la scansione.

Ciò lascia grande materiale intatto e forse poco conosciuto. Una pagina di alta qualità che riceve 7,000 visualizzazioni al mese potrebbe riceverne solo 2,500 se Google esegue la scansione delle pagine indesiderate che competono per lo stesso traffico.

Il rigonfiamento dell'indice può portare a percentuali di clic più basse e un'esperienza utente negativa. 

Quando gli utenti incontrano pagine di un indice eccessivamente ampio, devono vagliare risultati di bassa qualità per trovare ciò che stanno cercando, con il risultato di più rimbalzi e meno clic sui tuoi siti.

Nel tempo, questo riduce il tuo CTR, facendo sì che Google perda fiducia in te e ti posizioni più in basso.

Ecco uno schema di come il gonfiamento dell’indice influisce sulla salute del SEO:

• Sprecare un costoso budget di scansione su pagine che non contribuiscono in alcun modo alla crescita della tua attività.
• danneggiando le classifiche, riducendo il traffico e infine diminuendo i tassi di conversione.
• Diminuire il CTR e creare una pessima UX.

In poche parole, il gonfiamento dell’indice ritarda significativamente i tuoi progressi SEO riducendone silenziosamente l’efficacia maggior contenuto. È come cercare di uscire dalle sabbie mobili; ti trascina giù ad ogni passo.

Come risolvere il gonfiore dell'indice?

UN. Condurre un controllo dell'indice

Esplora Search Console e Google Analytics per determinare il valore delle pagine indicizzate. Ordina in:

• Contenuti essenziali da mantenere
• Lanugine media per rafforzare o solidificare
• Pagine zombie inutili da eliminare o reindirizzare

Segmentando le pagine in questo modo, puoi rivelare possibilità di consolidamento e potatura, consentendoti di spostare facilmente l'equità dei contenuti storici. Il traffico di link in corso verso le regioni del tuo sito che meglio soddisfano le richieste degli utenti.

Questa tecnica mostrerà anche i buchi nella progettazione del sito che richiedono il posizionamento di nuovi contenuti.

B. Rimuovi collegamenti interni

Se intendi non indicizzare il tuo materiale, l'eliminazione dei collegamenti interni ad esso ridurrà la capacità di Google di rilevarlo e indicizzarlo. 

Poiché Google utilizza collegamenti interni per trovare nuovo materiale sul tuo sito, la rimozione di quel canale fa sì che Google concentri la sua attenzione su altri collegamenti interni sulla tua pagina e li scansioni invece.

Se desideri rimuovere le pagine non necessarie, l'eliminazione dei collegamenti interni a tali pagine ridurrà la probabilità di collegamenti interrotti e ti consentirà di collegarti a informazioni più pertinenti che desideri che Google trovi.

C. Reindirizzamenti 301

Se il tuo sito web ha molti URL che contengono informazioni uguali o comparabili, utilizza i reindirizzamenti 301 alla versione canonica desiderata della pagina.

Ciò indirizzerà i segnali di equità e di ranking al URL canonico, eliminando il rigonfiamento dell'indice dovuto ai siti duplicati.

D. Imposta i tag canonici corretti

Google dà la priorità ai siti contenenti tag canonici nella sezione dell'intestazione ( ) per l'indicizzazione. 

Durante l'indicizzazione, evitiamo pagine duplicate e consolidiamo l'equità del collegamento, reindirizzandolo invece alla pagina principale.

e. Aggiorna o installa robot.txt

Se il tuo sito web non dispone già di un file robot.txt, creane uno. Per garantire che i crawler di ricerca raggiungano i siti corretti, si consiglia di rivedere e aggiornare regolarmente i file robot.txt correnti.

Un file robot.txt impedisce ai bot dei motori di ricerca di accedere alle sottodirectory. Ad esempio, impediamo a Google di eseguire la scansione dei risultati di ricerca generati dagli utenti. 

Se il nostro file robots.txt non riuscisse a raggiungere questo obiettivo, Google potrebbe accedere, scansionare e indicizzare migliaia di pagine che non desideriamo vengano visualizzate nei risultati di ricerca, esaurendo il suo budget di scansione.

F. Utilizza lo strumento per la rimozione degli URL di Google Search Console

Aggiungendo il "nessun indice" La direttiva potrebbe non essere una cura rapida e Google potrebbe continuare a indicizzare le pagine, motivo per cui il file Strumento per la rimozione degli URL può essere utile in alcune occasioni.

Tuttavia, utilizzare questa procedura solo come rimedio temporaneo. Quando richiedi, Google elimina immediatamente le pagine dal suo indice (in genere entro poche ore a seconda del volume delle query).

Gli strumenti di rimozione funzionano meglio se utilizzati insieme alla direttiva no-index. Ricorda che eventuali eliminazioni effettuate saranno reversibili in futuro.

G. Utilizza i tag Meta Robot e gli X-robot

Un documento HTML può aggiungere un meta tag robot per offrire informazioni su una singola pagina senza influenzare i robots. Hai un maggiore controllo sul modo in cui viene eseguita la scansione di ciascuna pagina.

Può anche includere istruzioni per crawler specifici ("Google bot" o "Bing bot") e omettere pagine dalle ricerche di immagini, video e notizie di Google. È necessario utilizzare un meta tag robots sulle pagine di cui non si desidera che i motori di ricerca eseguano la scansione.

Se inavvertitamente aggiungi un tag no-index a una pagina che non dovrebbe essere indicizzata secondo il tuo robots.

Il tag X-Robots viene visualizzato in una risposta dell'intestazione HTTP. Ha lo stesso scopo di un meta tag robots, controllando l'indicizzazione di foto, video, PDF e altri documenti non HTML.

H. Implementare l'impaginazione correttamente

Se il tuo sito web dispone di materiale impaginato (come elenchi di prodotti o archivi di articoli), utilizza i tag rel=”next” e rel=”prev” per indicare l'impaginazione appropriata ai motori di ricerca. 

Ciò impedisce loro di indicizzare ciascuna pagina impaginata individualmente, riducendo il gonfiamento dell'indice. 

Conclusione

Il gonfiamento dell'indice è un problema diffuso che ha un impatto sulle prestazioni di un sito Web nelle pagine dei risultati dei motori di ricerca e sull'esperienza dell'utente. 

L'eccessiva indicizzazione di siti irrilevanti da parte dei motori di ricerca nasconde materiale utile. Ciò porta a una diluizione dei ranghi e a uno spreco di risorse di scansione.

Tuttavia, riconoscerne le cause e attuare adeguati rimedi tecnologici è possibile migliorare le prestazioni SEO complessive.

Puoi identificare quali pagine del tuo sito hanno un indice gonfiato ed eliminarle utilizzando le tecniche discusse sopra.

Ciò può aiutarti a migliorare la valutazione della qualità complessiva del tuo sito nei motori di ricerca, a posizionarti più in alto e a creare un indice più pulito, consentendo a Google di identificare le pagine che desideri classificare in modo rapido ed efficace.

Domande frequenti

1. Cos'è il crawl bloat?

Ciò si verifica quando i motori di ricerca come Google indicizzano un numero enorme di pagine irrilevanti, ridondanti o di bassa qualità da un sito web. La presenza di un indice eccessivo può diluire gli sforzi SEO di un sito distribuendo il budget di scansione in modo non uniforme e influenzando le valutazioni della qualità complessiva dei motori di ricerca.

2. Come posso risolvere i problemi di indicizzazione delle pagine?

Questo problema si verifica quando chiedi direttamente a Google di indicizzare una pagina (aggiungendola alla mappa del sito o richiedendo manualmente l'indicizzazione), ma quella pagina non ha tag di indice. Il rimedio è semplice: cancella il tag noindex in modo che Google possa accedere alla pagina.

3. Come posso rimuovere una pagina dall'indicizzazione?

Per impedire che URL o domini vengano visualizzati nei risultati di ricerca di Google, utilizza un tag noindex nell'intestazione delle pagine che desideri eliminare. La deindicizzazione è il processo di rimozione di un URL esistente dall'indice di ricerca di Google.