Wróć do Bazy wiedzy

Skanowanie przez boty

Wyszukiwarki korzystają ze zautomatyzowanych, autonomicznych programów zwanych botami. Ich nadrzędnym zadaniem jest ciągłe przemierzanie internetu i skanowanie Twojego kodu źródłowego, aby ustalić, o czym jest Twoja witryna.

Jeśli platforma nie jest zoptymalizowana pod ich bezproblemowe skanowanie, Googlebot ma prawo porzucić ten proces, co skutkuje niewyświetlaniem się Twojej marki w wyszukiwarce.

Współczesnym "rakiem" web developmentu są strony renderowane po stronie klienta (SPA / CSR). Polega to na tym, że strona wysyła serwerowi botów... pusty arkusz i potężny skrypt, zrzucając na bota obowiązek dorysowania całej zawartości.

  • Boty dysponują ograniczonym limitem czasu dla każdej domeny.
  • Czekanie na wykonanie ociężałych skryptów zatrzymuje indeksację w martwym punkcie.
  • Czasami bot ignoruje te skrypty z braku czasu, uznając stronę za pozbawioną wartości.

Z tego powodu nasze etapy projektu obejmują budowę z użyciem generowania statycznego (SSG). W otterStudio piszemy strony, które w ułamku sekundy serwują robotom w pełni zarysowany i gotowy plik HTML.