Zoekmachine spider

Een robot die de inhoud van alle websites indexeert en vervolgens beoordeelt wat de relevantie van deze content is.