Sitemap Crawler

Wer sich mit der Suchmaschinenoptimierung (SEO) beschäftigt, wird früher oder später auf den Begriff „Sitemap Crawler“ stoßen. Ein Begriff, der für Verwunderung sorgt. Sitemap Crawler – was ist das? Was ist ein Sitemap Crawler? Der Begriff „Crawler“ stammt von der Suchmaschine WebCrawler her, welche bereits Anfang der 1990-er Jahre als erste öffentliche Suchmaschine die kompletten Texte einer Webseite indexierte. Suchmaschinen arbeiten mit sogenannten „Webcrawlern“, auch „Searchbots“ genannt. Da