robots.txt to plik w głównym katalogu strony, w którym mówisz robotom wyszukiwarek, których adresów nie mają odwiedzać.
Najczęstsze nieporozumienie: on nie ukrywa strony przed wynikami wyszukiwania. Blokuje wejście robota, ale adres i tak może się w wynikach pojawić, jeśli ktoś do niego linkuje. Do wykluczenia z wyników służy noindex.
Przykład. Firma przed wdrożeniem nowej strony zablokowała cały serwis, żeby Google nie zaindeksowało wersji testowej. Po uruchomieniu nikt nie zdjął blokady. Przez pięć tygodni strona nie istniała w wyszukiwarce, a ruch spadł do zera. Jedna linijka w pliku tekstowym.
Do czego się przydaje. Do odcięcia robotów od koszyka, panelu logowania, wyników wyszukiwania wewnątrz sklepu i adresów z filtrami — czyli miejsc, gdzie robot marnuje czas zamiast czytać treść.
Na co uważać. Po każdym wdrożeniu sprawdź zawartość pliku pod adresem twojadomena.pl/robots.txt. To najczęstsza przyczyna nagłego zniknięcia strony z Google.
Powiązane hasła
Dokumentacja źródłowa: Google Search Central — dokumentacja dla wyszukiwarki
← Wróć do słownika marketingowego
Data publikacji:
Data aktualizacji:
O autorze
Bartosz Paczyński
CEO i założyciel agencji social media Content Hero
Kieruje zespołem, który prowadzi profile i kampanie reklamowe w ekosystemie Meta, Google Ads, LinkedIn i TikTok. Pracował między innymi dla BNP Paribas, Raiffeisen Bank, ISIC, Bureau Veritas i ManpowerGroup. Z częścią klientów agencja współpracuje nieprzerwanie ponad 7 lat.
Bartosz Paczyński to certyfikowany Trener DIMAQ Professional z ramienia IAB Polska. Posiada certyfikat Scrum Mastera. Posiada takżę certyfikaty Google Ads. Działem PPC kieruje praktyk z ponad 10-letnim doświadczeniem. Bartosz Pczyński gościnnie wykłąda takżę nastudiach podyplomowych i MBA na Uniwersytecie Warszawskim oraz Akademii Leona Koźmińskiego.
Bartosz odpowiada za nadzór merytoryczny nad treściami na blogu: każdy tekst opiera się na publicznych badaniach rynku (IAB Polska, Mediapanel/Gemius, IAB Polska/PwC AdEx) oraz na danych z kampanii prowadzonych przez agencję, a wszystkie liczby podajemy ze wskazaniem źródła i daty pomiaru.
