Glossar

Webcrawler

Ein Webcrawler (auch als Spider, Robot oder Bot bezeichnet) durchsucht automatisch das Internet und analysiert die gefundenen Webseiten. Es ist ein Computerprogramm, das vorhandene Hyperlinks im Internet sucht, auflistet und besucht. Webcrawler werden vornehmlich von Suchmaschinen eingesetzt.