Ich möchte nicht, dass Suchmaschinen die meisten meiner Websites indexieren.
Ich möchte jedoch, dass Suchmaschinen zwei Ordner (und ihre Kinder) indexieren. Dies ist, was ich eingerichtet habe, aber ich glaube nicht, dass es funktioniert, ich sehe Seiten in Google, die ich verstecken wollte:
Hier ist meine robots.txt
%Vor%Was ist der richtige Weg, um alle Ordner außer 2 zu verbieten?
Ich habe ein Tutorial dazu in diesem Forum hier gegeben. Und in Wikipedia hier
Grundsätzlich gewinnt immer das erste passende robots.txt Muster:
%Vor%Aber ich vermute, es könnte zu spät sein. Sobald die Seite indexiert ist, ist es ziemlich schwer, sie zu entfernen. Die einzige Möglichkeit besteht darin, sie in einen anderen Ordner zu verschieben oder den Ordner nur mit einem Passwort zu schützen. Das sollten Sie in Ihrem Host-CPanel tun können.
Tags und Links seo google-search robots.txt