Pagina scansionata, ma attualmente non indicizzata: 5 controlli

Di SEOgrinder · Pubblicato il · 10 min di lettura

Risposta breve: «Pagina scansionata, ma attualmente non indicizzata» significa che Google ha richiamato la pagina e non l’ha aggiunta al proprio indice. Google la definisce «a common message for many sites», un messaggio comune a molti siti, che «doesn’t necessarily indicate an issue that needs attention», quindi la prima domanda è se la pagina conti davvero. Se conta, escludi i blocchi, confrontala con le tue pagine indicizzate, aspetta e ricontrolla: nessun pulsante forza l’indicizzazione, e Google non indica nessun motivo per questo stato.

Che cosa significa «Pagina scansionata, ma attualmente non indicizzata»?

Il report «Indicizzazione delle pagine» di Search Console divide ogni indirizzo che Google conosce in «Indicizzate» e «Non indicizzate». Nella tabella «Perché le pagine non sono indicizzate» questo stato porta la descrizione di Google stesso: «The page was crawled by Google but not indexed.», cioè la pagina è stata scansionata da Google ma non indicizzata. Il testo completo lo trovi nella guida al report Indicizzazione delle pagine. Ha due metà:

  • Scansionata: Google ha richiesto la pagina e l’ha ricevuta.
  • Non indicizzata: Google non l’ha salvata nel proprio indice, quindi non può comparire nei risultati di ricerca.

Per un singolo indirizzo, Controllo URL dice «L’URL non si trova su Google» e indica il motivo nella sezione «Indicizzazione delle pagine».

La descrizione di Google è breve. Dice che il messaggio è comune, non cita nessuna penalizzazione e non indica nessuna causa. La guida di Google al crawl budget fissa la regola generale: «not every page that is crawled will necessarily be indexed», non ogni pagina scansionata viene per forza indicizzata. Dopo la scansione, ogni pagina «must be evaluated, consolidated, and assessed to determine its suitability for the index», cioè va valutata, consolidata e giudicata per stabilire se è adatta all’indice. In quale di questi passaggi si sia fermata la tua pagina, Google non lo dice.

La pagina conta? Decidi prima di correggere qualcosa

La guida al report è schietta sulla copertura: «Don’t expect every URL on your site to be indexed. Some URLs might be duplicates or might not contain meaningful information.» Non devono quindi stare nell’indice tutti gli indirizzi: contano le pagine importanti. Per prima cosa ordina i tuoi indirizzi:

La tua paginaChe cosa fare
Una variante che non hai mai voluto nella ricerca, come un elenco filtrato o ordinato, o un duplicatoDi solito niente. Google mette i duplicati e le varianti con filtri tra le pagine che non indicizza.
Una pagina importante: un servizio, un prodotto, un articolo che vuoi far trovareFai i cinque controlli qui sotto.
Molte pagine con questo stato contemporaneamenteCerca che cosa hanno in comune gli indirizzi, per esempio una cartella o un template. Correggi quello, non ogni pagina singolarmente.

Google aggiunge che, se il tuo sito ha meno di 500 pagine, probabilmente il report non ti serve affatto. Una ricerca con site: seguito dall’indirizzo esatto, per esempio site:https://tuo-sito.example/tua-pagina, ti dice se una pagina chiave è indicizzata.

Pagina scansionata, ma attualmente non indicizzata: cinque controlli per una pagina importante

Google non indica nessuna causa per questo stato, quindi questi controlli si basano in parte su ciò che Google documenta e in parte sulla nostra valutazione. Quando si tratta della seconda, lo diciamo.

  1. Leggi il risultato memorizzato, poi esegui il test in tempo reale. In Controllo URL leggi la sezione «Indicizzazione delle pagine». È una fotografia: la guida a Controllo URL di Google dice che non è un test in tempo reale («This is not a live test») e che la pagina «may have changed or become unavailable since Google last saw it», cioè può essere cambiata o non essere più disponibile da quando Google l’ha vista l’ultima volta. Poi scegli «Testa URL pubblicato» e apri «Visualizza pagina testata» per vedere come Google esegue il rendering della pagina. Se il test in tempo reale mostra un errore o una pagina vuota, correggi prima quello. Un test pulito, però, non è un verdetto: secondo Google «does not test for all possible indexing issues, including whether this is a duplicate or alternate page», cioè non verifica tutti i possibili problemi di indicizzazione, compreso se la pagina è un duplicato o una versione alternativa.
  2. Escludi comunque i blocchi. I requisiti tecnici di Google ne elencano tre: Googlebot non è bloccato, la pagina risponde con HTTP 200 e ha contenuto indicizzabile. Rispettarli non significa che la pagina verrà indicizzata: «indexing isn’t guaranteed». Search Console segnala un tag noindex, un blocco di robots.txt, un soft 404 e un reindirizzamento con stati propri, e la nostra lettura è che di solito non stanno dietro a questo. Controlla lo stesso, perché lo stato memorizzato può essere più vecchio della tua ultima modifica. Sono gli stessi controlli che servono quando una pagina non compare affatto su Google: stato HTTP, noindex, robots.txt, soft 404 e rendering di JavaScript. Sotto l’elenco trovi due comandi per un’occhiata veloce.
  3. Confronta la pagina con quelle indicizzate. Google dice di non indicizzare le copie duplicate di una pagina, e che alcuni URL «might not contain meaningful information», cioè potrebbero non contenere informazioni significative. La nostra valutazione, non quella di Google: affianca la pagina a quella indicizzata sullo stesso argomento e chiediti che cosa aggiunge. Se due pagine rispondono alla stessa domanda, uniscile e manda l’indirizzo più debole a quello più forte con un reindirizzamento 301. Se una pagina è poco più di un titolo e un template, dalle contenuto vero oppure accetta che resti fuori.
  4. Metti dei link da pagine correlate e indicizzate. La nostra valutazione: una pagina che dipende solo dalla sitemap, o che sta a diversi clic di profondità, dà pochi segnali che tu la consideri importante. Collegala da pagine indicizzate su argomenti vicini, in modo che si adatti al testo.
  5. Aspetta, poi guarda di nuovo lo stesso indirizzo. Per questo stato Google non indica nessun tempo. Le sue indicazioni generali riguardano la scansione: «It can take a week or so» per una pagina o un sito nuovo, e l’indicizzazione «is never instant». La nostra lettura: ricontrolla dopo alcuni giorni, non ogni ora. La guida di Google dice di chiedere una nuova scansione solo dopo una modifica importante che Google non ha notato da «a week or more», cioè da una settimana o più. Devi essere titolare o utente completo della proprietà, e c’è una quota.

Per il controllo 2, questo comando stampa il codice di stato e l’indirizzo finale dopo i reindirizzamenti, e poi l’eventuale header X-Robots-Tag. Il risultato giusto è un 200 e nessuna riga di header:

curl -s -L -o /dev/null -w "%{http_code} %{url_effective}\n" https://tuo-sito.example/tua-pagina
curl -s -D - -o /dev/null https://tuo-sito.example/tua-pagina | grep -i x-robots-tag

Rilevata, ma attualmente non indicizzata: lo stato vicino

I due stati stanno uno accanto all’altro nel report:

Stato in Search ConsoleDescrizione di GoogleChe cosa significa
Pagina scansionata, ma attualmente non indicizzata«The page was crawled by Google but not indexed.»Google ha letto la pagina e l’ha lasciata fuori.
Rilevata, ma attualmente non indicizzata«The page was found by Google, but not crawled yet.»Google conosce l’indirizzo ma non l’ha ancora richiamato. La data dell’ultima scansione è vuota.

Per «Rilevata» Google indica un motivo tipico: «wanted to crawl the URL but this was expected to overload the site», voleva scansionare l’URL ma si prevedeva che sovraccaricasse il sito, quindi ha riprogrammato la scansione. La guida al crawl budget mette i siti con «a large portion» di URL in questo stato tra quelli per cui è scritta. Sono siti grandi: 1 milione o più di pagine uniche con modifiche moderatamente frequenti (circa settimanali), oppure 10.000 o più con contenuti che cambiano molto in fretta, aggiornati ogni giorno. Google definisce i numeri «a rough estimate», una stima approssimativa, e non soglie esatte. Per un sito senza un gran numero di pagine che cambiano in fretta la guida dice che tenere aggiornata la sitemap e controllare con regolarità il report Indicizzazione delle pagine «is adequate», è sufficiente.

Su un sito così puoi fare poco. Tieni il server veloce e stabile: Google abbassa il proprio limite di scansione quando un sito rallenta o risponde con errori del server (5xx) o con limitazioni di frequenza (429). Tieni aggiornata la sitemap, poi aspetta. Google non ha ancora richiamato queste pagine, quindi lo stato non dice nulla sul loro contenuto.

Che cosa mostra SEOgrinder, e che cosa non può mostrare

SEOgrinder è il nostro strumento, e lo costruiamo noi. Per questo stato:

  • L’analisi gratuita su seogrinder.com non può leggere il tuo report Indicizzazione delle pagine. Non si collega al tuo account Search Console. La scheda «Ricerca Google» accetta un export caricato del report Rendimento (query, pagine, clic, impressioni). Gli stati dell’indice non fanno parte di questi dati.
  • Un’installazione locale collegata a Search Console può interrogare Controllo URL sulla pagina analizzata e mostrare la risposta di Google con le sue parole, come rilievo «Google non ha questa pagina nel proprio indice». È un’attività se la pagina deve essere trovata (è nella tua sitemap, è la home page, o Search Console ha mostrato impressioni per lei). Altrimenti compare sotto «Per tua informazione».
  • Controlli vicini alle cause a cui Google accenna. Il riquadro «Indicizzazione» nella scheda «Pagina su Google» mostra se la pagina può essere indicizzata e se l’URL può essere scansionato. La scansione del sito elenca le coppie di pagine quasi identiche, le pagine con poco testo e le pagine a cui non punta nessun link interno. Sono caratteristiche delle tue pagine. Se Google abbia lasciato fuori una pagina per una di queste, SEOgrinder non può dirlo, e Google non lo dice.

Errori comuni

  • Inseguire il report fino a zero. Google scrive che «non-indexed URLs can be fine», gli URL non indicizzati possono andare bene. Devono essere dentro solo le pagine importanti.
  • Richiedere l’indicizzazione in continuazione. La pagina di Google sulle richieste di nuova scansione dice che chiedere più volte lo stesso URL «won’t get it crawled any faster», e che una richiesta «does not guarantee that inclusion in search results will happen instantly or even at all». La pagina è già stata scansionata; le serve un motivo per essere giudicata in modo diverso, non una richiesta ripetuta.
  • Avviare «Convalida correzione» per uno stato senza correzione. La guida di Google dice che la convalida finisce come «Non riuscita» quando Google trova anche una sola istanza rimasta del problema, e che «it might not always make sense to fix and validate a specific issue». La nostra lettura: per questo stato Google non indica nulla da correggere, quindi gli URL che lo portano ancora rendono prevedibile una convalida non riuscita.
  • Cambiare la data per sembrare freschi. La pagina di Google sui contenuti utili elenca tra i segnali di allarme il cambiare la data delle pagine per farle sembrare fresche quando il contenuto non è cambiato in modo sostanziale.
  • Mandare una singola pagina al modulo per i problemi di indicizzazione. Google rimanda al modulo solo per un problema di indicizzazione completo e riguardante l’intero sito, dopo che hai diagnosticato a fondo i possibili problemi.
  • Reinviare la sitemap e aspettarsi un cambiamento. Una sitemap aiuta Google a scoprire gli indirizzi, ma questa pagina è già stata scoperta e scansionata.

Domande frequenti

«Pagina scansionata, ma attualmente non indicizzata» è una penalizzazione?

La descrizione di Google non cita né una penalizzazione né un’azione manuale. Definisce il messaggio comune e dice che non indica per forza un problema.

Perché una pagina resta per settimane in questo stato?

Per questo stato Google non indica né un motivo né una tempistica. Dice che l’indicizzazione «is never instant» e che non garantisce che tutte le pagine, ovunque, finiscano nel suo indice. La nostra lettura, non un’affermazione di Google: una pagina che non aggiunge nulla a ciò che Google ha già può restare fuori.

Posso costringere Google a indicizzare la pagina?

No. «Richiesta di indicizzazione» chiede a Google di scansionare un indirizzo. Non è un ordine di aggiungerlo.

Perché la convalida di questo stato è fallita?

Perché la convalida finisce come «Non riuscita» appena Google trova un URL che porta ancora il problema, e Google non indica nessuna correzione per questo stato. Giudica invece ogni pagina chiave con i cinque controlli qui sopra.

Il prossimo passo

Apri il report Indicizzazione delle pagine, clicca lo stato e scegli i due o tre indirizzi che per te contano. Esegui su di loro l’analisi gratuita di SEOgrinder e leggi il riquadro «Indicizzazione» nella scheda «Pagina su Google». Correggi ciò che è rosso, premi «Ricontrolla», poi migliora ciò che la pagina dice rispetto alle sue vicine indicizzate e collegala da pagine correlate. Riguarda gli stessi indirizzi dopo qualche giorno. Se la pagina è appena stata pubblicata, parti dal controllo 5: Google non indica nessun tempo preciso.

Per approfondire

Altri articoli del blog