Mit der robots.txt kann du ja nur sagen: Du darfst die Seite besuchen oder Du darfst nicht die Seite besuchen.
Die
HTML-Meta-Elemente mit dem Namen robots dienen dazu, dem Bot zu sagen, ob er den Inhalt indizieren, archivieren, Links verfolgen darf oder nicht. Dazu dienen die Attribute content mit den folghenden Werten [no]archive,[no]index und [no]follow.
http://www.robotstxt.org/meta.html
So gesehen könnte mit noarchive ein noindex einhergehen. Muss aber nicht. Es kann sinnvoll sein, Suchbegriffe in der Webseite zu crawlen, aber sie nicht in den Cache oder Internetarchiv zu nehemen.
Für mich resultiert aus noarchive und noindex noch kein nofollow.
Kommt auf die Umstände an, was du der Sucvhmaschine erlauben willst.
Übrigens: Du wirst mit der Methode robots.txt udn Meta-Element robots nur die Bots zügeln können, die das auch wirklich beachten. Bots sollten sich daran halten, müssen aber nicht, manche tun es einfach nicht.
Die kannst du nur über die Abfrage des Useragents und URL-Rewrite-Regeln (mod_rewrite) stoppen.
Jemand zu Hause?![[twitter]](/battie/theme/default/icons/twitter.gif){kind=icon}
![[gelöst]](/battie/theme/default/icons/tick.png "gelöst"){kind=icon}
+5 replies![[Homepage]](/battie/theme/default/homepage.gif)
![[default_avatar]](/battie/theme/default/default_avatar.gif){kind=avatar}
Schrift
use strict; use warnings;
Blog
Einstellungen![[feed]](/battie/theme/default/icons/feed.png){kind=icon}
![[Powered by Battie]](/battie/img/powered.png)
