Die Robots-Tag
META-Robots
Wenn Sie Seiten, die Sie gerade nicht wollen, um zu sehen, Spinnen haben, sollten Sie einen Roboter-Tags, um es zu spezifizieren. Sie fragen sich vielleicht, warum würden Sie wollen sicherstellen, dass eine Seite nicht indiziert werden. Betrachten privaten Seiten auf Ihrer Website, Login-Seiten, etc.
Zusammen mit Ihren anderen META-Tags, platzieren Sie den folgenden Code ein:
<meta name="robots" content="noindex,nofollow">
oder
<meta name="robots" content="none">
Wenn Sie sicherstellen, dass die Seite nicht indiziert werden, wollen aber die Spinne kann keine Links findet es folgen, können Sie diesen Tag:
<meta name="robots" content="noindex,follow">










