Google unterstützt wieder Wildcards in der robots.txt
Kategorie: Google, Suchmaschinen, Suchmaschinenoptimierung (SEO)09. November 2005
Google unterstützt offensichtlich wieder Wildcards in der robots.txt Diese Information findet sich auf der URLRemoval Seite von Google.
Es ist zum Beispiel möglich alle dynamischen Seiten mit angehängten URL-Parametern mit Hilfe der Wildcard * für Google auszuschließen:
User-agent: Googlebot
Disallow: /*?
Oder wenn man nur Seiten mit bestimmten Parametern ausschließen möchte:
User-agent: Googlebot
Disallow: /*partnerid=
Die Nutzung von Wildcards ist eigentlich nicht im Standard für die robots.txt vorgesehen und wird von anderen Suchmaschinen wohl (leider) nicht unterstützt. Wäre sicherlich begrüßenswert den Standard und die Funktionalität aller Suchmaschinen entsprechend zu erweitern.
![[Valid RSS]](../../../wp-images/valid-rss.png "Validate my RSS feed"){kind=small}