Robot.txt nicht zulassen Seite aber nicht an den Start mit

Question

Ich möchte

example.com/10

aber nicht andere Seiten bestimmte Seite nicht zulassen mit/10

Beispiel Start .com/101

beispiele.com/102

example.com/103

Wie geht das?

Answer 1

Sie können das Allow Schlüsselwort, es zu erreichen:

User-agent: * 
Allow: /10* 
Disallow: /10$ 

Ergebnisse von http://tools.seobook.com/robots-txt/analyzer/:

Url: /10 
Multiple robot rules found 
Robots disallowed: All robots 

Url: /101 
Robots allowed: All robots 

Url: /102 
Robots allowed: All robots 

Url: /103 
Robots allowed: All robots 

jedoch ältere Roboter es richtig interpretieren kann. Zum Beispiel nur die erste Zeile lesen.