L’indicizzazione del maggior numero possibile di pagine sul tuo sito Web può essere molto allettante per i professionisti del marketing che stanno cercando di aumentare l’autorità dei propri motori di ricerca.
Ma, sebbene sia vero che la pubblicazione di più pagine pertinenti per una particolare parola chiave (presupponendo che siano anche di alta qualità) migliorerà il tuo posizionamento per quella parola chiave, a volte c’è in realtà più valore nel mantenere determinate pagine sul tuo sito web fuori dell’indice di un motore di ricerca.
… Che cosa?!
Resta con noi, gente. Questo post ti guiderà attraverso il motivo per cui potresti voler rimuovere determinate pagine Web dalle SERP (pagine dei risultati dei motori di ricerca) e esattamente come procedere.
De-indicizzazione di una pagina da Google
Ci sono alcune occasioni in cui potresti voler escludere una pagina web o una parte di una pagina web dalla scansione e dall’indicizzazione dei motori di ricerca come:
- Per impedire l’indicizzazione di contenuti duplicati (quando è presente più di una versione di una pagina indicizzata dai motori di ricerca, come in una versione stampabile dei tuoi contenuti)
- Per trattare le pagine di amministrazione e di accesso per uso interno a meno che non siano destinate a essere utilizzate da una comunità
- Per una pagina di ringraziamento (ovvero la pagina su cui arriva un visitatore dopo la conversione su una delle tue pagine di destinazione) in cui il visitatore ottiene l’accesso a qualsiasi offerta promessa dalla pagina di destinazione, ad esempio un collegamento a un PDF di ebook
Ecco come appare la pagina di ringraziamento per il nostro ebook di suggerimenti SEO, ad esempio:
Vuoi che chiunque arrivi sulle tue pagine di ringraziamento ci arrivi perché ha già compilato un modulo su una pagina di destinazione — non perché hanno trovato la tua pagina di ringraziamento nella ricerca.
Perchè no? Perché chiunque trovi la tua pagina di ringraziamento nella ricerca può accedere direttamente alle tue offerte per la generazione di lead, senza doverti fornire le proprie informazioni per passare attraverso il modulo di acquisizione dei lead. Qualsiasi marketer che comprende il valore delle pagine di destinazione comprende quanto sia importante acquisire prima quei visitatori come lead, prima che possano accedere alle tue offerte.
Linea di fondo: Se le tue pagine di ringraziamento sono facilmente individuabili tramite una semplice ricerca su Google, potresti lasciare preziosi lead sul tavolo.
Quel che è peggio, potresti persino scoprire che alcune delle tue pagine con il ranking più alto per alcune delle tue parole chiave a coda lunga potrebbero essere le tue pagine di ringraziamento, il che significa che potresti invitare centinaia di potenziali lead a bypassare i moduli di acquisizione dei lead. Questa è una ragione piuttosto convincente per cui vorresti rimuovere alcune delle tue pagine web dalle SERP.
Quindi, come si fa a “de-indicizzare” determinate pagine dai motori di ricerca? Ecco tre modi per farlo.
3 modi per de-indicizzare una pagina web dai motori di ricerca
Robots.txt per de-indicizzare
Utilizzare se: si desidera un maggiore controllo su ciò che si deindicizza e si dispone delle risorse tecniche necessarie.
Un modo per rimuovere una pagina dai risultati del motore di ricerca è aggiungere un file robots.txt al tuo sito. Il vantaggio dell’utilizzo di questo metodo è che puoi ottenere un maggiore controllo su ciò che consenti ai bot di indicizzare. Il risultato? Puoi mantenere proattivamente i contenuti indesiderati fuori dai risultati di ricerca.
All’interno di un file robots.txt, puoi specificare se desideri bloccare i bot da una singola pagina, un’intera directory o anche solo una singola immagine o file. C’è anche un’opzione per impedire la scansione del tuo sito mentre continui a consentire il funzionamento degli annunci AdSense di Google se li hai.
Detto questo, delle due opzioni a tua disposizione, questa richiede il kung fu più tecnico. Per imparare a creare un file robots.txt, ti consigliamo di leggere questo articolo che spiega esattamente come farlo..
Clienti HubSpot: Puoi imparare come installare un file robots.txt sul tuo sito web qui e imparare come personalizzare i contenuti del file Robots.txt qui.
Se non hai bisogno di tutto il controllo di un file robots.txt e stai cercando una soluzione più semplice e meno tecnica, allora questa seconda opzione fa per te.
Htaccess No Index No Follow to De-Index
Utilizzare se: il tuo sito Web è in esecuzione su Apache e mod_headers è abilitato, questa è una soluzione rapida.
In questa circostanza, potresti allegare questa singola riga al tuo file .htaccess:
Set di intestazione X-Robots-Tag “noindex, nofollow”
Per indicare che il tuo sito web può essere indicizzato, ma mai mostrato nei risultati di ricerca di Google.
Meta No Index No Follow to De-Index
Utilizzare se: si desidera una soluzione più semplice per la deindicizzazione di un’intera pagina Web e/o la deindicizzazione dei collegamenti su un’intera pagina Web.
Usare un metatag per impedire che una pagina appaia nelle SERP – e/o i link su una pagina – è sia facile che efficace. Richiede solo un minimo di know-how tecnico: in effetti, è davvero solo un lavoro di copia/incolla se stai utilizzando il giusto sistema di gestione dei contenuti.
I tag che ti permettono di fare queste cose sono chiamati “noindex” e “nofollow”. Prima di entrare in come aggiungere questi tag, prendiamoci un momento per definire e distinguere tra i due. Dopotutto, sono due direttive completamente diverse e possono essere utilizzate da sole o insieme.
Che cos’è un tag “noindex”?
Quando aggiungi un metatag “noindex” a una pagina web, dice a un motore di ricerca che anche se può eseguire la scansione della pagina, non può aggiungere la pagina al suo indice di ricerca.
Quindi qualsiasi pagina con la direttiva “noindex” lo farà non entra nell’indice di ricerca del motore di ricerca e quindi non può essere mostrato nelle pagine dei risultati del motore di ricerca.
Che cos’è un tag “nofollow”?
Quando aggiungi un metatag “nofollow” a una pagina web, impedisce ai motori di ricerca di eseguire la scansione del link su quella pagina. Ciò significa anche che qualsiasi autorità di ranking che la pagina ha sulle SERP lo farà non essere trasmesso alle pagine a cui si collega.
Quindi qualsiasi pagina con una direttiva “nofollow” avrà tutti i suoi collegamenti ignorati da Google e da altri motori di ricerca.
Come ho detto prima, puoi aggiungere una direttiva “noindex” da sola o insieme a una direttiva “nofollow”. Puoi anche aggiungere una direttiva “nofollow” da sola.
Quando usare “noindex” e “nofollow” separatamente
Aggiungi solo un tag “noindex” quando tu non farlo vuoi che un motore di ricerca indicizzi la tua pagina web nella ricerca, ma tu fare vuoi che segua i collegamenti su quella pagina, dando così autorità di classificazione alle altre pagine a cui la tua pagina si collega.
Le pagine di destinazione a pagamento ne sono un ottimo esempio. Non vuoi che i motori di ricerca indicizzino le pagine di destinazione che le persone dovrebbero pagare per vedere, ma potresti volere che le pagine che collegano traggano vantaggio dalla sua autorità.
Aggiungi solo un tag “nofollow” quando tu fare vuoi che un motore di ricerca indicizzi la tua pagina web nella ricerca, ma tu non farlo vuoi che segua i link su quella pagina.
Non ci sono molti esempi di quando aggiungeresti un tag “nofollow” a un’intera pagina senza aggiungere anche un tag “noindex”. Quando stai cercando di capire cosa fare su una determinata pagina, è più una questione se aggiungere il tuo tag “noindex” con o senza un tag “nofollow”.
Quando usare “noindex, nofollow” insieme
Aggiungi sia un tag “noindex” che “nofollow” quando tu non farlo vuoi che i motori di ricerca indicizzino una pagina web nella ricerca e non vuoi che segua i link su quella pagina.
Le pagine di ringraziamento sono un ottimo esempio di questa situazione. Non vuoi che i motori di ricerca indicizzino la tua pagina di ringraziamento, né vuoi che seguano il link alla tua offerta e inizino a indicizzare il contenuto di quell’offerta.
Come aggiungere un metatag “noindex” e/o “nofollow”
Passo 1: Copia uno dei seguenti tag.
Per “noindex”:
Per “nofollow”:
Sia per “noindex” che per “nofollow”:
Passo 2: Aggiungi il tag alla sezione
dell’HTML della tua pagina, ovvero l’intestazione della pagina.Se sei un cliente HubSpot, è semplicissimo: fai clic qui o scorri verso il basso per le istruzioni specifiche per gli utenti di HubSpot.
Se tu sei non un cliente HubSpot, quindi dovrai incollare manualmente questo tag nel codice della tua pagina web. Non preoccuparti: è piuttosto semplice. Ecco come lo fai.
Innanzitutto, apri il codice sorgente della pagina web che stai tentando di deindicizzare. Quindi, incolla il tag completo in una nuova riga all’interno della sezione
dell’HTML della tua pagina, nota come intestazione della pagina. Gli screenshot qui sotto ti guideranno attraverso di esso.Il tag
indica l’inizio dell’intestazione:Ecco il metatag sia per “noindex” che per “nofollow” incollato nell’intestazione:
E il tag indica la fine dell’intestazione:
Boom! Questo è tutto. Questo tag dice a un motore di ricerca di girarsi e andare via, lasciando la pagina fuori dai risultati di ricerca.
Nessun indice Nessun follow in HubSpot
Aggiungere i meta tag “noindex” e “nofollow” è ancora più semplice. Tutto quello che devi fare è aprire lo strumento HubSpot alla pagina a cui vuoi aggiungere questi tag e scegliere la scheda “Impostazioni”.
Quindi, in Opzioni avanzate e fai clic su “Head HTML”. Nella finestra sottostante, incolla lo snippet di codice appropriato. Nell’esempio seguente, ho aggiunto sia un tag “noindex” che un tag “nofollow” poiché è una pagina di ringraziamento.
Premi “Salva” e sei d’oro.
Con successo Nessun indice No Seguendo una pagina
Hai appena cancellato magicamente la tua pagina dai risultati dei motori di ricerca. Ora puoi ricominciare a catturare più contatti persi.
Ora, tieni presente che non vedrai i risultati istantaneamente. Le tue modifiche non entreranno in vigore fino alla prossima volta che un motore di ricerca esegue la scansione della tua pagina. A seconda della frequenza con cui in genere pubblichi nuove pagine sul tuo sito Web, potrebbero essere necessarie alcune settimane. Più frequentemente pubblichi contenuti, più spesso i motori di ricerca eseguiranno la scansione del tuo sito. Il modo migliore per tenere traccia della frequenza con cui Google visita il tuo sito Web è esaminare le statistiche di scansione in Strumenti per i Webmaster di Google.
Linea di fondo: Se noti che la tua pagina viene ancora visualizzata nei risultati di ricerca di Google anche con il tag “noindex”, è probabilmente perché Google non ha eseguito la scansione del tuo sito da quando hai aggiunto il tag. Puoi richiedere a Google di eseguire nuovamente la scansione della tua pagina utilizzando lo strumento Visualizza come Google.
Inoltre, tieni presente che i web crawler di alcuni motori di ricerca potrebbero interpretare queste direttive in modo diverso rispetto a Google, quindi la tua pagina potrebbe comunque essere visualizzata nei risultati di altri motori di ricerca. Ma per Google, funzionerà perfettamente, una volta che riuscirà a eseguire la scansione del tuo sito web.
Indipendentemente da ciò, sarai in grado di dormire un po’ più facilmente sapendo che alla fine hai reso il tuo sito web un posto migliore per il tuo marketing.
Nota del redattore: questo articolo è stato originariamente pubblicato a luglio 2016 ed è stato aggiornato per completezza.