Strona zeskanowana, ale jeszcze niezindeksowana: co znaczy i co robić

Krótka odpowiedź: „Strona zeskanowana, ale jeszcze niezindeksowana” znaczy, że Google pobrał stronę i nie dodał jej do swojego indeksu. Google nazywa to „a common message for many sites”, czyli komunikatem częstym w wielu witrynach, który „doesn't necessarily indicate an issue that needs attention”, więc najpierw zadaj sobie pytanie, czy strona jest ważna. Jeśli tak, wyklucz blokady, porównaj stronę ze swoimi zindeksowanymi, poczekaj i spójrz jeszcze raz; przycisku, który wymusza indeksowanie, nie ma, a przyczyny tego stanu Google nie podaje.

Co znaczy „Strona zeskanowana, ale jeszcze niezindeksowana”?

Raport „Indeksowanie stron” w Search Console dzieli każdy adres, który zna Google, na „Zindeksowano” i „Nie zindeksowano”. W tabeli „Dlaczego strony nie są indeksowane” ten stan ma opis samego Google: „The page was crawled by Google but not indexed.” (Strona została zeskanowana przez Google, ale nie zindeksowana.) Pełny tekst znajdziesz w pomocy do raportu „Indeksowanie stron”. W polskiej wersji dokumentacji ten stan nosi nazwę „Strona zeskanowana, ale jeszcze niezindeksowana”. Opis ma dwie połówki:

• Zeskanowana: Google zażądał strony i ją otrzymał.
• Niezindeksowana: Google nie zapisał jej w swoim indeksie, więc nie może się pojawić w wynikach wyszukiwania.

Dla pojedynczego adresu narzędzie do sprawdzania adresów URL mówi „Adres URL nie znajduje się w Google” i podaje przyczynę w sekcji „Indeksowanie stron”.

Opis Google jest krótki. Mówi, że komunikat jest częsty, nie wspomina o żadnej karze i nie podaje przyczyny. Poradnik Google o budżecie skanowania formułuje ogólną zasadę: „not every page that is crawled will necessarily be indexed”, czyli nie każda zeskanowana strona musi zostać zindeksowana. Po zeskanowaniu każda strona „must be evaluated, consolidated, and assessed to determine its suitability for the index”, czyli musi zostać oceniona, skonsolidowana i zbadana pod kątem przydatności do indeksu. Na którym z tych etapów zatrzymała się twoja strona, Google nie mówi.

Czy strona jest ważna? Zdecyduj, zanim cokolwiek naprawisz

Pomoc do raportu mówi o pokryciu bez ogródek: „Don't expect every URL on your site to be indexed. Some URLs might be duplicates or might not contain meaningful information.” Liczą się tylko kluczowe strony, więc najpierw posortuj swoje adresy:

Google dodaje, że jeśli witryna ma mniej niż 500 stron, raport prawdopodobnie w ogóle nie jest ci potrzebny. Wyszukanie site: z dokładnym adresem, na przykład site:https://twoja-strona.example/twoja-podstrona, powie ci, czy kluczowa strona jest zindeksowana.

Strona zeskanowana, ale jeszcze niezindeksowana: pięć kontroli dla ważnej strony

Google nie podaje przyczyny tego stanu, więc te kontrole opierają się na tym, co Google dokumentuje, i na naszej własnej ocenie. Ten drugi rodzaj oznaczamy.

1. Przeczytaj zapisany wynik, potem zrób test wersji opublikowanej. W narzędziu do sprawdzania adresów URL przeczytaj sekcję „Indeksowanie stron”. To migawka: pomoc do narzędzia mówi „This is not a live test” (to nie jest test na żywo), a strona „may have changed or become unavailable since Google last saw it”, czyli mogła się zmienić lub stać się niedostępna od czasu, gdy Google ją ostatnio widział. Następnie wybierz „Sprawdź URL wersji opublikowanej” i otwórz „Wyświetl przetestowaną stronę”, żeby zobaczyć, jak Google renderuje stronę. Jeśli test pokazuje błąd albo pustą stronę, napraw to najpierw. Czysty test to jednak nie wyrok uniewinniający: Google mówi, że „does not test for all possible indexing issues, including whether this is a duplicate or alternate page”, czyli nie sprawdza wszystkich możliwych problemów z indeksowaniem, w tym tego, czy strona jest duplikatem albo wersją alternatywną.
2. Wyklucz blokady mimo wszystko. Wymagania techniczne Google wymieniają trzy: Googlebot nie jest zablokowany, strona odpowiada kodem HTTP 200 i ma treść możliwą do zindeksowania. Ich spełnienie nie znaczy, że strona zostanie zindeksowana: „indexing isn't guaranteed”. Search Console zgłasza znacznik noindex, blokadę w robots.txt, soft 404 i przekierowanie pod osobnymi stanami, a według naszej interpretacji zwykle nie stoją one za tym stanem. Sprawdź je mimo to, bo zapisany stan może być starszy niż twoja ostatnia zmiana. Dwa polecenia do szybkiego rzutu oka są pod listą.
3. Porównaj stronę ze swoimi zindeksowanymi stronami. Google według własnych słów nie indeksuje duplikatów strony, a niektóre adresy „might not contain meaningful information”, czyli mogą nie zawierać istotnych informacji. Nasza ocena, nie Google: połóż stronę obok zindeksowanej strony na ten sam temat i zapytaj, co dodaje. Jeśli dwie strony odpowiadają na to samo pytanie, połącz je i słabszy adres przekieruj kodem 301 na mocniejszy. Jeśli strona to niewiele więcej niż nagłówek i szablon, daj jej prawdziwą treść albo pogódź się z tym, że zostanie poza indeksem.
4. Podlinkuj ją z pokrewnych, zindeksowanych stron. Nasza ocena: strona, która wisi tylko na mapie witryny albo leży kilka kliknięć głęboko, słabo pokazuje, że uważasz ją za ważną. Podlinkuj ją ze zindeksowanych stron na sąsiednie tematy, tak, żeby pasowało to do tekstu.
5. Poczekaj, potem spójrz jeszcze raz na ten sam adres. Dla tego stanu Google nie podaje czasu. Jego ogólne wypowiedzi dotyczą skanowania: „It can take a week or so” dla nowej strony lub witryny, a indeksowanie „is never instant”. Nasza interpretacja: spójrz jeszcze raz po kilku dniach, nie co godzinę. Pomoc Google radzi prosić o ponowne skanowanie dopiero po ważnej zmianie, której Google nie zauważył od „a week or more”, czyli od tygodnia lub dłużej. Musisz być właścicielem lub pełnym użytkownikiem usługi, a obowiązuje limit.

Do kontroli 2: pierwsze polecenie wypisuje kod statusu i adres końcowy po przekierowaniach, drugie ewentualny nagłówek X-Robots-Tag. Dobry wynik to 200 i brak linii z nagłówkiem:

curl -s -L -o /dev/null -w "%{http_code} %{url_effective}\n" https://twoja-strona.example/twoja-podstrona
curl -s -D - -o /dev/null https://twoja-strona.example/twoja-podstrona | grep -i x-robots-tag

Strona wykryta – obecnie niezindeksowana: sąsiedni stan

Oba stany stoją w raporcie obok siebie:

Przy stanie „wykryta” Google podaje typowy powód: „wanted to crawl the URL but this was expected to overload the site”, czyli chciał zeskanować adres, ale spodziewano się, że przeciąży to witrynę, więc przełożył skanowanie. Poradnik o budżecie skanowania zalicza witryny z „a large portion” adresów w tym stanie do tych, dla których został napisany. To duże witryny: 1 milion lub więcej unikalnych stron ze średnio częstymi (mniej więcej cotygodniowymi) zmianami albo 10 000 lub więcej z bardzo szybko zmieniającą się treścią, aktualizowaną codziennie. Google nazywa te liczby „a rough estimate”, czyli przybliżonym szacunkiem, a nie dokładnymi progami. Dla witryny bez dużej liczby szybko zmieniających się stron poradnik mówi, że aktualna mapa witryny i regularne zaglądanie do raportu „Indeksowanie stron” „is adequate”, czyli wystarczają.

Na takiej witrynie możesz zrobić niewiele. Utrzymuj serwer szybki i stabilny: Google obniża swój limit skanowania, gdy witryna zwalnia albo odpowiada błędami serwera (5xx) lub ograniczaniem liczby żądań (429). Utrzymuj aktualną mapę witryny, a potem czekaj. Google jeszcze nie pobrał tych stron, więc ten stan nic nie mówi o ich treści.

Co pokazuje SEOgrinder, a czego nie

SEOgrinder to nasze narzędzie, sami je budujemy. W sprawie tego stanu:

• Darmowy skan na seogrinder.com nie odczyta twojego raportu „Indeksowanie stron”. Nie łączy się z twoim kontem Search Console. Zakładka „Wyszukiwarka Google” przyjmuje wgrany eksport raportu Skuteczność (zapytania, strony, kliknięcia, wyświetlenia). Stanów indeksu w tych danych nie ma.
• Lokalna instalacja połączona z Search Console może zapytać narzędzie do sprawdzania adresów URL o skanowaną stronę i pokazać odpowiedź Google jej własnymi słowami, jako ustalenie „Google nie ma tej strony w indeksie”. To zadanie, jeśli strona ma być znaleziona (jest w twojej mapie witryny, jest stroną główną albo Search Console pokazała dla niej wyświetlenia). W przeciwnym razie pojawia się w części „Do wiadomości”.
• Kontrole w pobliżu przyczyn, na które wskazuje Google. Karta „Indeksowanie” w zakładce „Strona w Google” pokazuje, czy strona może być zaindeksowana i czy adres URL może być skanowany. Przegląd witryny wymienia pary stron niemal identycznych, strony z małą ilością tekstu i strony, na które nie wskazuje żaden link wewnętrzny. To cechy twoich stron. Czy Google pominął stronę z powodu którejś z nich, SEOgrinder nie powie, a Google tego nie mówi.

Najczęstsze błędy

• Gonienie raportu do zera. Google pisze, że „non-indexed URLs can be fine”, czyli niezindeksowane adresy mogą być w porządku. Tylko kluczowe strony muszą być w indeksie.
• Wielokrotne proszenie o zindeksowanie. Strona Google o prośbach o ponowne skanowanie mówi, że wielokrotne zgłaszanie tego samego adresu „won't get it crawled any faster”, a prośba „does not guarantee that inclusion in search results will happen instantly or even at all”. Strona została już zeskanowana; potrzebuje powodu, by zostać oceniona inaczej, a nie powtórzonej prośby.
• Uruchamianie „Sprawdź poprawkę” dla stanu, w którym nie ma poprawki. Według pomocy Google weryfikacja kończy się stanem „Niepowodzenie”, gdy Google znajdzie jedno pozostałe wystąpienie problemu, a „it might not always make sense to fix and validate a specific issue”, czyli naprawianie i weryfikowanie konkretnego problemu nie zawsze ma sens. Nasza interpretacja: dla tego stanu Google nie podaje niczego do naprawy, więc adresy, które go nadal noszą, sprawiają, że nieudana weryfikacja jest wynikiem oczekiwanym.
• Zmiana daty, żeby strona wyglądała na świeżą. Strona Google o pomocnych treściach zalicza do sygnałów ostrzegawczych zmienianie dat na stronach, żeby wyglądały na świeże, gdy treść nie zmieniła się istotnie.
• Wysyłanie pojedynczej strony do formularza problemów z indeksowaniem. Google odsyła do formularza tylko przy pełnym problemie z indeksowaniem w całej witrynie, po pełnej diagnozie możliwych problemów.
• Ponowne przesyłanie mapy witryny w oczekiwaniu na zmianę. Mapa witryny pomaga Google odkrywać adresy, ale ten adres został już odkryty i zeskanowany.

Najczęstsze pytania

Czy „Strona zeskanowana, ale jeszcze niezindeksowana” to kara?

Opis Google nie wspomina o karze ani o ręcznym działaniu. Nazywa komunikat częstym i mówi, że niekoniecznie wskazuje problem.

Dlaczego strona tkwi w tym stanie tygodniami?

Google nie podaje dla tego stanu ani przyczyny, ani harmonogramu. Mówi, że indeksowanie „is never instant” i że nie gwarantuje, iż wszystkie strony w sieci trafią do jego indeksu. Nasza interpretacja, a nie wypowiedź Google: strona, która nie dodaje niczego do tego, co Google już ma, może zostać poza indeksem.

Czy mogę zmusić Google do zindeksowania strony?

Nie. Prośba o zindeksowanie („Request indexing”) prosi Google o zeskanowanie adresu. To nie polecenie, by go dodać.

Dlaczego weryfikacja tego stanu zakończyła się niepowodzeniem?

Bo weryfikacja kończy się stanem „Niepowodzenie”, gdy tylko Google znajdzie adres, który nadal ma problem, a dla tego stanu Google nie podaje poprawki. Oceń każdą ważną stronę za pomocą pięciu kontroli powyżej.

Twój następny krok

Otwórz raport „Indeksowanie stron”, kliknij ten stan i wybierz dwa, trzy adresy, na których ci zależy. Uruchom na nich darmowy skan SEOgrinder i przeczytaj kartę „Indeksowanie” w zakładce „Strona w Google”. Napraw to, co czerwone, kliknij „Sprawdź ponownie”, potem popraw to, co strona mówi w porównaniu ze zindeksowanymi sąsiadami, i podlinkuj ją z pokrewnych stron. Po kilku dniach spójrz jeszcze raz na te same adresy.

Zobacz także

• Strona nie wyświetla się w Google? 7 kontroli, by znaleźć przyczynę
• Jak zaindeksować stronę w Google: 5 kroków, które przetestowaliśmy