wie man die Website von Suchmaschinen komplett ausblenden?

Question

Was ist die am besten empfohlene Weise yo verstecken meine Staging-Website von Suchmaschinen, ich googelte es und fand einige sagt, dass ich einen Metatag setzen sollte, und einige sagten, dass ich eine Textdatei in meinem Website-Verzeichnis, ich möchte das wissen Standardweg.

meine aktuelle Website ist in asp.net, während ich glaube, dass es eine gemeinsame Möglichkeit für jede Website unabhängig von seiner Programmiersprache sein muss.

Answer 1

Verwenden Sie eine robots.txt-Datei.

sehen hier http://www.robotstxt.org/robotstxt.html

Answer 2

http://www.robotstxt.org/robotstxt.html

Answer 3

Sie können auch Ihre Server robots.txt verwenden:

User-agent: * 
Disallow:/

Google-Crawler diese Einstellungen tatsächlich respektiert.

Answer 4

Es gibt Suchmaschinen/Buch-Kennzeichnung Dienstleistungen, die robots.txt nicht verwenden. Wenn Sie wirklich nicht wollen, dass es jemals auftaucht, würde ich vorschlagen, capcha nur zu benutzen, um zur Seite zu navigieren.

Answer 5

Wirklich einfache Antwort; Passwort schützen Sie es. Wenn es sich um eine Staging-Site handelt, ist es wahrscheinlich nicht beabsichtigt, dass sie öffentlich zugänglich ist (nur Privatpublikum). Der Versuch, es von den Suchmaschinen fernzuhalten, behandelt nur ein Symptom, wenn das eigentliche Problem darin besteht, dass Sie es nicht angemessen abgesichert haben.

Answer 6

Denken Sie daran, dass Sie nicht verbergen können eine öffentlich zugängliche ungeschützte Website von einer Suchmaschine. Sie können fragen, dass Bots es nicht indizieren (durch die robots.txt, die meine feinen Kollegen erzogen haben), und die Leute, die die Bots schreiben, können wählen, dass Sie Ihre Website nicht darauf basierend indizieren, aber es muss mindestens einen geben da draußen, der all die Dinge indexiert, die die Leute von ihm verlangen, nicht zu indizieren. Zumindest eins.

Wenn dies eine große Anforderung ist, die automatische Crawler aus, könnte eine Art von CAPCHA-Lösung für Sie arbeiten.

Answer 7

Was ist der beste empfohlene Weg, yo meine Staging Website von Suchmaschinen

Einfach verstecken: machen es nicht öffentlich. Wenn das nicht funktioniert, veröffentlichen Sie es nur so lange, dass es gültig ist, um es live zu posten und dann herunterzunehmen.

Aber alles, was gesagt wurde, ist eine grundlegendere Frage: "Warum kümmern?". Wenn die Staging-Site wirklich die Live-Site sein soll, einen Schritt vor dem Live-Push, dann ist es egal, ob sie indiziert wird.