Ein Computerprogramm, das automatisch das Internet durchsucht und Webseiten analysiert. Crawler (auch Webcrawler) werden vor allem von Suchmaschinen eingesetzt. Weitere Anwendungen sind z.B. das Sammeln von RSS-Feeds und E-Mail-Adressen.
Ein Computerprogramm, das automatisch das Internet durchsucht und Webseiten analysiert. Crawler (auch Webcrawler) werden vor allem von Suchmaschinen eingesetzt. Weitere Anwendungen sind z.B. das Sammeln von RSS-Feeds und E-Mail-Adressen.