Liczba zaindeksowanych podstron

Liczba zaindeksowanych podstron to parametr monitoringu stron internetowych, który śledzi w czasie, ile adresów witryny wyszukiwarka ma w indeksie, i zgłasza nagłą zmianę tej liczby. Pomiar kończy się jednym z trzech wyników: liczba stabilna, spadek lub skok ponad przyjęty próg albo brak odczytu, gdy źródło danych jest niedostępne. Dla wyszukiwarki Google podstawowym źródłem jest raport indeksowania stron w Search Console, który pokazuje, ile adresów witryny zostało zindeksowanych, ile nie i z jakich powodów ^[1].

Jak działa

Raport działa w obrębie jednej właściwości Search Console i podaje przykładową listę do 1000 zindeksowanych adresów; lista nie musi obejmować wszystkich adresów w danym stanie ^[1]. Nie należy oczekiwać, że w indeksie znajdą się wszystkie adresy, tylko strony kanoniczne; duplikaty i wersje alternatywne zostają poza nim ^[1]. Wartość bezwzględna mówi więc mało, a sygnałem jest zmiana między odczytami.

Operator site: nie jest wiarygodnym licznikiem. Google zaznacza, że nie musi on zwracać wszystkich zaindeksowanych adresów pod danym prefiksem, i przestrzega przed używaniem go do ustalania, ile adresów jest w indeksie ^[2].

Automatyczny odczyt wymaga API Search Console. Metoda inspekcji adresu zwraca stan jednego adresu, obecnie wyłącznie wersji w indeksie Google. Adres musi należeć do właściwości wskazanej w siteUrl, a zapytanie wymaga zakresu OAuth webmasters albo webmasters.readonly ^[3]. Limit wynosi 2000 zapytań dziennie i 600 na minutę na witrynę ^[5]. W zasobie map witryn pole contents[].indexed jest oznaczone jako przestarzałe, a contents[].submitted podaje tylko liczbę adresów w mapie ^[4]. Liczby z raportu nie da się więc pobrać jednym zapytaniem: pomiar przez API to próbka adresów, na przykład z mapy witryny, sprawdzana adres po adresie w dziennym limicie.

Potrzebne dane to dostęp do właściwości każdej monitorowanej witryny, lista adresów do sprawdzenia i historia odczytów. Nowych użytkowników właściwości może dodawać wyłącznie jej właściciel ^[6].

RYS. 1.1Dostęp przez API z uprawnieniem

Standardy i specyfikacje

Parametr nie ma własnej normy; opisuje go dokumentacja wyszukiwarki. Raport indeksowania wymienia powody pominięcia adresu, między innymi znacznik noindex, blokadę w robots.txt, błąd 404, błędy serwera 5xx i błędy przekierowań ^[1]. Spadek liczby zindeksowanych stron bez odpowiadających mu błędów wskazuje, że dostęp zablokowano przez robots.txt, noindex albo wymóg logowania ^[1]. Znaczniki blokujące indeksowanie omawia artykuł Indeksowalność.

Search Console rozróżnia poziomy dostępu. Właściciel ma pełną kontrolę nad właściwością i może dodawać oraz usuwać użytkowników; użytkownik pełny widzi wszystkie dane, a ograniczony większość danych z mniejszym zakresem działań ^[6].

Zagrożenia i skutki

RYS. 1.2Przyczyny spadku liczby

Blokada po migracji. Przewodnik Google o przenoszeniu witryny przypomina o usunięciu znaczników noindex i blokad w robots.txt, potrzebnych tylko na czas migracji ^[8]. Po istotnej zmianie pozycje mogą się wahać, a w średniej wielkości serwisie ponowne zindeksowanie trwa kilka tygodni lub dłużej ^[8], więc wczesny spadek nie zawsze oznacza błąd.

Działanie ręczne. Nakłada je pracownik Google, który uznał, że strony witryny naruszają zasady dotyczące spamu. Skutkiem jest niższa pozycja stron albo ich pominięcie w wynikach ^[7]. Wśród rodzajów naruszeń są spam tworzony przez użytkowników, maskowanie i podstępne przekierowania oraz ukryty tekst ^[7].

Włamanie SEO. Atak nazywany japanese keyword hack tworzy w witrynie nowe strony z automatycznie generowanym tekstem w losowo nazwanych katalogach ^[9]. Stosuje maskowanie, przez co przy bezpośrednim wejściu strony wyglądają na nieistniejące ^[9]. Atakujący często dodają się jako właściciele w Search Console, żeby zmieniać ustawienia takie jak mapy witryn ^[9]. W liczbie zaindeksowanych adresów taki atak może dać przyrost zamiast spadku. Objawy infekcji opisuje artykuł Infekcja.

Przykłady

Obraz w danych	Możliwa przyczyna	Gdzie potwierdzić
Spadek z powodem „noindex” [1]	znacznik pozostawiony po migracji [8]	raport indeksowania stron [1]
Spadek bez błędów w raporcie [1]	robots.txt, noindex albo logowanie [1]	plik robots.txt, nagłówki odpowiedzi
Strony znikają z wyników	działanie ręczne [7]	raport działań ręcznych [7]
Nowe adresy w losowych katalogach [9]	włamanie SEO	lista właścicieli w Search Console [9]
Różne liczby z site: [2]	operator nie zwraca wszystkich adresów [2]	raport indeksowania stron [1]
Wahania po zmianie adresów [8]	ponowne indeksowanie	porównanie po kilku tygodniach [8]