So stoppen Sie die Google-Indexierung meines Github-Repositorys

Question

Ich verwende Github, um den Text einer meiner Websites zu speichern, aber das Problem ist, dass Google den Text in Github indiziert. Also wird der gleiche Text sowohl auf meiner Seite als auch auf Github erscheinen. z.B. this search Der Top-Hit ist meine Seite. Der zweite Hit ist das Github-Repository.

Es macht mir nichts aus, wenn Leute die Quellen sehen, aber ich möchte nicht, dass Google sie indiziert (und möglicherweise für doppelte Inhalte bestraft.) Gibt es eine Möglichkeit, neben dem privaten Repository, Google anzuweisen, die Indizierung zu stoppen es?

Was passiert bei Github Pages? Dies sind Websites, bei denen sich die Quelle in einem Github-Repository befindet. Haben sie das gleiche Problem der Duplizierung?

Nehmen Sie this search die am häufigsten getroffenen Leads zu the Marpa site, aber ich sehe nicht die source in den Suchergebnissen aufgeführt. Wie?

Answer 1

Die https://github.com/robots.txt Datei von GitHub ermöglicht die Indizierungs der Kleckse in dem ‚Master‘ Zweig, sondern beschränkt alle anderen Zweige. Wenn Sie also keinen Master-Zweig haben, sollte Google Ihre Seiten nicht indexieren.

Wie die ‚Master‘ Zweig entfernen:

In Ihrem Klon einen neuen Zweig erstellen - nennen wir es ‚main‘ und schieben Sie es

zu GitHub

git checkout -b main 
git push -u origin main 

auf GitHub den Standardzweig ändern (siehe im Abschnitt Einstellung Ihres Repository) oder hier https://github.com/blog/421-pick-your-default-branch

dann den Master-Zweig aus dem Klon entfernen und von GitHub:

git branch -d master 
git push origin :master 

Bekommen Sie andere Leute, die bereits Ihr Repository gegabelt haben könnten, um dasselbe zu tun.

Alternativ, wenn Sie finanziell GitHub unterstützen möchten, können Sie https://help.github.com/articles/making-a-public-repository-private

Answer 2

Kurzer Gruss. Ja, das kannst du mit robots.txt.

Wenn Sie verhindern möchten, dass Googlebot Inhalte auf Ihrer Website crawlt, haben Sie eine Reihe von Optionen, einschließlich der Verwendung von "robots.txt", um den Zugriff auf Dateien und Verzeichnisse auf Ihrem Server zu blockieren.

Sie benötigen eine robots.txt-Datei nur, wenn Ihre Website Inhalte enthält, die von Suchmaschinen nicht indiziert werden sollen. Wenn Sie möchten, dass Suchmaschinen alles auf Ihrer Site indizieren, benötigen Sie keine robots.txt-Datei (nicht einmal eine leere).

Während Google den Inhalt der von robots.txt gesperrten Seiten nicht crawlt oder indexiert, indexieren wir die URLs möglicherweise noch, wenn wir sie auf anderen Seiten im Internet finden. Daher können die URL der Seite und möglicherweise andere öffentlich verfügbare Informationen wie Ankertext in Links zu der Site oder der Titel aus dem Open Directory-Projekt (www.dmoz.org) in den Google-Suchergebnissen angezeigt werden.

Quellen:

http://support.google.com/webmasters/bin/answer.py?hl=en&answer=93708 http://support.google.com/webmasters/bin/answer.py?hl=en&answer=156449

Answer 3

Wenn Sie wollen, an die Master-Zweig bleiben scheint es einen privaten Repo (und Upselling Ihre GitHub Konto) oder über einen anderen Dienst keine Möglichkeit, um verwenden, die privaten Angebote Repos kostenlos wie Bitbucket.

Answer 4

einfache antwort: machen sie ihren repo privat.

https://help.github.com/articles/making-a-public-repository-private