Indexieren der RSS-Feeds verhindern

[dhm]

Letztes Jahr hatte ich schonmal ein Blog mit s9y aufgesetzt.
Anfangs waren bei Google nur die rss-Feeds indexiert,
mittlerweile auch die "normalen" Seiten (aber die Feeds sind immernoch oben mit dabei).

Das möchte ich nun gerne bei meinem 2. Blog verhindern.
Wie erreicht man das? Möchte also nur die normalen Seiten haben bei Google&Co.

[garvinhicking]

Hi!

Evtl. könnte das mit einer robots.txt klappen? Mit Disallow: *.rss oder so?

Grüße,
Garvin

[dhm]

Hmm, habe mal ein wenig gesucht und nicht gefunden, wo steht, dass man auch das Indexieren von Dateitypen per Wildcard verbieten darf.

Auf dieser Seite steht auch:

Meine Idee war aber ursprünglich, die robots.txt und nicht das nofollow-Attribut dafür zu nutzen. Allerdings ist es in der robots.txt lt. Spezifikation nicht erlaubt, per Wildcard Unterverzeichnisse und/oder Dateien auszuschließen.

Allerdings kommt der Autor zu dem Schluss, dass Google sowas entgegen der Spezifikationen erlaubt. Wie es mit anderen Suchmaschinen aussieht, hat er aber nicht getestet.

(geht übrigens genau um dieses Thema: Feeds per robots.txt von Suchmaschinen ausschließen)

Wäre es nicht passend, wenn eine Lösung dafür feste bei Serendipity eingebaut wird? Ich mein ... gibt es überhaupt jemanden, der die Feeds in den Suchmaschinenergebnissen gelistet haben will?

[garvinhicking]

Hi!

Wie würde man denn einem RSS-Feed sagen, dass er nicht indizier twerden darf? Bei RSS-Feeds gibt es ja kein <meta> Tag für "no-index", das geht also garnicht s9y seitig...

Viele Grüße,
Garvin

[stm999999999]

wie dort geschrieben: Aufpassen, daß nicht google Blog Search ausgeschlossen wird!

[dhm]

Wie würde man denn einem RSS-Feed sagen, dass er nicht indizier twerden darf? Bei RSS-Feeds gibt es ja kein <meta> Tag für "no-index", das geht also garnicht s9y seitig...

Hatte daran gedacht, alle Feeds in ein Verzeichnis zu packen und dann dieses Verzeichnis mit der robots.txt verbieten. (wobei ich halt nicht weiß, wie das mit den Feeds überhaupt funktioniert).

Ginge das? Oder ist das vllt. sogar schon der Fall?
Die Links der Feeds sehen ja so aus http://example.net/serendipity/feeds/ - aber feeds ist ja kein Verzeichnis, oder?

[garvinhicking]

Hi!

Hatte daran gedacht, alle Feeds in ein Verzeichnis zu packen und dann dieses Verzeichnis mit der robots.txt verbieten. (wobei ich halt nicht weiß, wie das mit den Feeds überhaupt funktioniert).

Die Feeds sind ja virtuell, daher gibt es kein "Verzeichnis" aus dem sie kommen. Alles wird über die rss.php angesprochen, diese wiederrum liegt aber im Stammverzeichnis. Und wenn man URL-Rewriting nutzt kann man keine .htaccess/robots.txt in das nciht existierende Verzeichnis verschieben...

Du könntest es mit einer robots.txt im Stammverzeichnis probieren und dort versuchen eine Pfadangabe wie "feeds" einzufügen?

Grüße,
Garvin