Kropi

Yahoo! hat im SiteExplorer eine neue Funktion eingebaut, nennt sich “Yahoo! Search Dynamic URL Rewriting”. Man hat damit die Möglichkeit einzelne Teile einer URL gezielt für den Bot zu sperren. Seien es Session-IDs, Feeds, Druckansichten etc. Duplicate Content wird so wirkungsvoll unterbunden, der Crawler hat weniger Arbeit. Das könnte den Index aktueller machen.

Für Deutschland ist diese Funktion im Moment eher sinnlos. Yahoo! ist derartig gering verbreitet, das sich die Arbeit nicht wirklich lohnt. Sollte dieses Protokoll in Zukunft von allen großen Suchmaschinen unterstützt werden, dann könnte man es mal einer näheren Betrachtung unterziehen.

Wer seine Projekte ein wenig im Griff hat, kann Duplicate Content auch einfach per mod_rewrite, .htaccess und robots.txt ausschalten. Mit dem Unterschied, das es dann für alle Suchmaschinen gilt und nicht nur für eine exotische. Verhindere ich Duplicate Content bei yahoo! mittels “Yahoo! Search Dynamic URL Rewriting“, so muss ich es für google extra nochmal rausprogrammieren. Da kann ich mir den Schritt bei yahoo! auch sparen.

written by admin