Roboty indeksujące strony

Z ToProste
Wersja z dnia 17:50, 14 cze 2014 autorstwa Victor (dyskusja | edycje) (Zabezpieczył Roboty indeksujące strony ([edit=sysop] (na zawsze) [move=sysop] (na zawsze)))

(różn.) ← poprzednia wersja | przejdź do aktualnej wersji (różn.) | następna wersja → (różn.)
Skocz do: nawigacji, wyszukiwania

Roboty indeksujące strony są to programy zbierające informacje ze stron internetowych. Analizują one strukturę i treść publikowaną na stronach aby następnie umieścić ją w indeksie wyszukiwarek.

Roboty stale "przeglądają" zawartość stron. Jedne robią to pobieżnie - sprawdzając czy od ostatniej wizyty zaszyły jakieś zmiany, drugie przeglądają cały serwis.

Główne zadania robotów

  • zbieranie informacji o stronie,
  • sprawdzanie kodu strony,
  • monitorowanie "co nowego",
  • dodawanie do wyszukiwarek,
  • tworzenia mirrorów stron.


Inne nazwy robotów

  • bot indeksujący
  • pająk, spider
  • pełzacz, web crawler
  • web wanderer


Zobacz też

<htmlet>zobacz-tez</htmlet>


Podstawowe informacje o robotach wyszukiwarek