Robots.txt: Hoe Stel je dit Bestand Correct in?

Het robots.txt-bestand vertelt zoekmachines welke pagina’s je wilt laten indexeren en welke niet. Leer hoe dit bestand werkt, je het instelt en je fouten vermijdt.