Robot

Er wird auch Spider oder Crawler genannt. Dabei handelt es sich um ein auf einem Server laufendes Script, das in eigener Regie das Web durchforscht. Gefundene Seiten werden dann analysiert, dem Index hinzugefügt und Hyperlinks für die Verfolgung vorgemerkt.

Zurück