Lexikon :: Crawler

Crawler, Bot

Crawler, auch Webcrawler, Spider oder Bot/Searchbot genannt.

Ein Webcrawler ist eine Software, bzw. ein Computerprogramm, welches automatisch das Internet durchsucht und Webseiten analysiert.