Webcrawler
Ein sogenannter Webcrawler (auch Crawler, Bot, Spider oder Searchbot) ist ein Softwareprogramm, dass Inhalte im Internet durchsucht, analysiert und anschließend indexiert. Die Inhalte stammen dabei von Websites und können beispielsweise Bilder, Texte oder Videos...
Mehr lesen