Hallo,
ich habe eine Frage zu einer robots.txt Datei:
Ich möchte eine komplette Seite nicht indizieren lassen.
Dies ist möglich durch
Disallow: /
Jedoch möchte ich, dass die Index-Seite und 2 bestimmte Unterseiten dennoch indiziert werden.
Gibt es irgend einen Befehl, um solche Ausnahmen zu definieren?
Viele Grüße
luac