Kann ich eine Datei `robots.txt` für ein Unterverzeichnis auf der Domain meiner Schule verwenden?

Question

Ich besitze Webspace, der bei einer Universität registriert ist. Google hat leider meinen Lebenslauf (Lebenslauf) auf der Website gefunden, aber er hat ihn als wissenschaftliche Publikation falsch indiziert, was Dinge wie Zitieren auf Google Scholar verzerrt. Ich habe versucht, eine robots.txt in mein lokales Unterverzeichnis hochzuladen. Das Problem ist, dass Google diese Datei ignoriert und stattdessen die Regeln verwendet, die für die Schuldomäne aufgelistet sind.

Das heißt, sieht die URL wie

www.someschool.edu/~myusername/mycv.pdf

ich eine robots.txt hochgeladen haben, die hier

gefunden werden kann

www.someschool.edu/~myusername/robots.txt

Und Google wird es ignoriert und stattdessen die robots.txt für die Domäne des Schule mit

www.someschool.edu/robots.txt

Wie kann ich Googlebot ignorieren meinen Lebenslauf zu machen?

Answer 1

Leider ist robots.txt definiert, um was auch immer Sie erhalten, wenn Sie GET /robots.txt, so dass Sie es nicht für Ihr Unterverzeichnis verwenden können.

Sie können den HTTP-Header X-Robots-Tag verwenden, wenn Sie benutzerdefinierte .htaccess Dateien verwenden können. Hier ist Google's documentation on X-Robots-Tag.