Robots.txt

Dit is een bestand waarin is opgenomen welke mappen en bestanden een robot mag openen om deze vervolgens te tonen in de zoekresultaten.