User-agent: * Disallow: /admin/ Disallow: /contrib/ Disallow: /doc/ Disallow: /lib/ Disallow: /modules/ Disallow: /plugins/ Disallow: /scripts/ Disallow: /tmp/ # forsøker å holde yandex ute da jeg ikke vet hva slags robot dette er. Vi får se om respekterer robots.txt User-agent: yandex Disallow: /