Agencja social media Warszawa · ul. Nowy Świat 33/13 Obsługa od 500 zł netto/mies. · Bezpłatna konsultacja →

Crawler

Data publikacji: Ostatnia aktualizacja:

Crawler to program wyszukiwarki, który odwiedza strony, czyta ich zawartość i podąża za odnośnikami. Robot Google nazywa się Googlebot i to od jego wizyty zaczyna się każda obecność w wynikach.

Robot nie ma nieskończonego czasu na Twoją witrynę. Im więcej bezwartościowych adresów każesz mu odwiedzić, tym rzadziej zagląda tam, gdzie naprawdę chcesz.

Przykład. Portal z ogłoszeniami miał filtry generujące osobny adres dla każdej kombinacji miasta, ceny i kategorii — dziesiątki tysięcy kombinacji. Googlebot spędzał większość czasu na tych adresach, a nowe ogłoszenia czekały na zaindeksowanie po kilka dni. Po zablokowaniu adresów z parametrami filtrów świeże oferty zaczęły trafiać do wyników tego samego dnia. Nie dodano ani jednej strony — zmieniono tylko to, co robot ma czytać.

Jak mu pomóc. Czytelna struktura linków wewnętrznych, aktualna mapa witryny, szybkie odpowiedzi serwera i odcięcie adresów, które niczego nie wnoszą: koszyka, wyników wyszukiwania w sklepie, wariantów sortowania.

Na co uważać. To, że robot odwiedził stronę, nie znaczy, że ją zaindeksuje. W Search Console status „zeskanowana, ale niezindeksowana” oznacza dokładnie to: robot był, przeczytał i uznał, że strona nie wnosi dość, by trafić do wyników.

Powiązane hasła

Plik robots.txtSitemapaCrawl rate limitBłąd indeksowaniaNoindex

Usługi Content Hero

Prowadzenie fanpageProwadzenie InstagramaReklama Google AdsPozycjonowanie w GoogleProfil Firmy w GoogleCennik usług

← Wróć do słownika marketingowego

Potrzebujesz wsparcia w marketingu online?

Napisz do nas — odpowiemy z konkretnym planem

Bartosz Paczyński – CEO agencji social media Content Hero

O autorze

Bartosz Paczyński

CEO i założyciel agencji social media Content Hero

Kieruje zespołem, który prowadzi profile i kampanie reklamowe w ekosystemie Meta, Google Ads, LinkedIn i TikTok. Pracował między innymi dla BNP Paribas, Raiffeisen Bank, ISIC, Bureau Veritas i ManpowerGroup. Z częścią klientów agencja współpracuje nieprzerwanie ponad 7 lat.

Bartosz Paczyński to certyfikowany Trener DIMAQ Professional z ramienia IAB Polska. Posiada certyfikat Scrum Mastera. Posiada także certyfikaty Google Ads. Działem PPC kieruje praktyk z ponad 10-letnim doświadczeniem. Bartosz Paczyński gościnnie wykłada także na studiach podyplomowych i MBA na Uniwersytecie Warszawskim oraz Akademii Leona Koźmińskiego.

Bartosz odpowiada za nadzór merytoryczny nad treściami na blogu: każdy tekst opiera się na publicznych badaniach rynku (IAB Polska, Mediapanel/Gemius, IAB Polska/PwC AdEx) oraz na danych z kampanii prowadzonych przez agencję, a wszystkie liczby podajemy ze wskazaniem źródła i daty pomiaru.

Wróć do wszystkich wpisów · Słownik marketingowy

Zacznijmy

Wolisz, żebyśmy zajęli się tym za Ciebie?

Wiedza z bloga jest za darmo, ale czas przedsiębiorcy już nie. Zamów bezpłatną wycenę i sprawdź, jak wygląda współpraca z agencją.

Zamów bezpłatną wycenę

Czytaj dalej

Inne wpisy z bloga

Logo

Logo to znak graficzny firmy. Ocenia się je po tym, czy działa w małym rozmiarze, w jednym kolorze i na ciemnym tle.

Czytaj dalej

PrestaShop

PrestaShop to system sklepowy z otwartym kodem na własnym hostingu. Własny hosting to własny obowiązek pilnowania.

Czytaj dalej

Google Tag Manager

Google Tag Manager to narzędzie, które pozwala dodawać na stronę kody pomiarowe — analitykę, piksele, śledzenie zdarzeń — bez grzebania w plikach…

Czytaj dalej