2016-07-20 14 views
0

Ich weiß, ich kann von Suchmaschinen blockieren Arten von Dateien, Zugriff auf eine Wild Card wie folgt aus:Kann ich Suchmaschinen daran hindern, mit robots.txt Dateien ab einem bestimmten Buchstaben zu scannen?

Disallow: /*.gif$ 

dass der Zugang zu Gifs nicht zulässt, oder mehr wie Dateien in GIF-Endung.

Aber gibt es eine Möglichkeit zu verhindern, dass Suchmaschinen beispielsweise auf alle Dateien zugreifen, die mit "_" beginnen?

Würde so etwas funktionieren?

Disallow: /_*.*$ 

Oder zumindest vielleicht (wenn ich unbedingt eine Erweiterung einstellen muss)?

Disallow: /_*.php$ 

Antwort

0

Gemäß dem "offiziellen" docs

Beachten Sie auch, dass Globbing und reguläre Ausdrücke sind nicht entweder in der User-Agent oder Verbieten Linien unterstützt.

+0

dies nach: https://support.google.com/webmasters/answer/6062596 ... Sie, dass Wildcard ich in der Frage erwähnt (Code zitierte aus derselben Seite) unter Verwendung von Dateitypen ausschließen. Selbst wenn das offiziell nicht funktioniert, funktioniert es mit Google. Das bedeutet wahrscheinlich, dass ich keine objektive Antwort haben kann (mir war nicht bewusst, dass verschiedene Suchmaschinen robots.txt unterschiedlich parsen). – RafaelLVX