Ein Bot (z. B. Crawler oder Web Bot) ist ein automatisiertes Programm, das Websites durchsucht, indexiert oder interagiert, wie Googles Googlebot für SEO. Im Hosting müssen Server Bots handhaben, um Überlastung zu vermeiden; in Webdesign sollten Sites bot-freundlich sein, z. B. mit robots.txt. Bots existieren seit den 1990er Jahren, mit frühen Suchmaschinen-Crawlern wie dem World Wide Web Wanderer 1993.