Das ist ja unerhört! Seitdem ich vorhin mein Posting veröffentlichte, wird mein Blog von mail.ru-Robot-Invasoren heimgesucht, schon stundenlang. Das sind jetzt schon über 3.000 Seiten-Aufrufe und damit zirka Drei-Viertel des gesamten Traffics heute. Dieser Robot von mail.ru ist neu hier, glaube ich, mir vorher noch nicht aufgefallen. Am meisten besucht haben mich schon in den letzten Monaten robots vom ebenfalls russischen Yandex. Im Serendipity-Forum klagen über den schon einige und wollen den aussperren. Mit der Zeit tauchen immer neue Robots hier auf, auch aus Amerika.
Da die robots aber nicht von neuen Unternehmen oder Diensten geschickt werden, frage ich mich, warum erst jetzt, nach welchen Kriterien werden die losgeschickt? Vielleicht in Abhängigkeit von dem Alter der Website, ablesbar an der History der Wayback-Maschine? Warum wird mein deutschsprachiges Blog von der russischsprachigen mail.ru stundenlang gescannt? Oder ausgekratzt!? XML-Seiten werden heute von Suchdiensten (z.B. Flugbuchungsportale und Reisebuchungsportale, Preisvergleiche) ausgekratzt (Scraping).
