Zmiany

Skocz do: nawigacji, wyszukiwania

Roboty indeksujące strony

Dodane 1240 bajtów, 15:50, 14 cze 2014
Zabezpieczył [[Roboty indeksujące strony]] ([edit=sysop] (na zawsze) [move=sysop] (na zawsze))
'''Roboty indeksujące strony'''są to [[program]]y zbierające informacje ze stron internetowych. Analizują one strukturę i treść publikowaną na stronach aby następnie umieścić ją w indeksie [[Wyszukiwarka internetowa |wyszukiwarek]].
[[Plik:Strona w przygotowaniuRoboty stale "przeglądają" zawartość stron. Jedne robią to pobieżnie - sprawdzając czy od ostatniej wizyty zaszyły jakieś zmiany, drugie przeglądają cały serwis.png]]
== Główne zadania robotów ==* zbieranie informacji o stronie,* sprawdzanie kodu strony,* monitorowanie "co nowego",* dodawanie do wyszukiwarek,* tworzenia mirrorów stron.   == Inne nazwy robotów ==* [[Bot |bot]] indeksujący* pająk, spider* pełzacz, web crawler* web wanderer  == Zobacz też ==<htmlet>zobacz-tez</htmlet>* [[Robots.txt |Sterowanie zachowaniem robotów za pomocą pliku robots.txt]]* [[Meta name – robots |Sterowanie zachowaniem robotów za pomocą META NAME]]   === Podstawowe informacje o robotach wyszukiwarek ===* [http://www.robotstxt.org/wc/faq.html The Web Robots FAQ] * [http://www.robotstxt.org/wc/exclusion.html Robots Exclusion] Opis zasad sterowania robotem na własnej stronie * [http://www.robotstxt.org/wc/active.html The Web Robots Database] Lista aktywnych działających robotów sieciowych   [[Kategoria:Wyszukiwarki internetowe]][[Kategoria:UzupełnićRobots]]