Crawlertraffic
bernhard.reisenberger.uni-linz, 1. Oktober 2012, 14:31
Laut http://stats.wikimedia.org/wikimedia/squids/SquidReportCrawlers.htm brauchen Crawler wie GoogleBot, facebook, bing,... insgesamt 15.2% des gesamten Internettraffics.
Eine ungeheurige Menge an Serverabfragen, die nicht nötig wäre.
Würden Firmen der kleineren Crawler, Indizierungen bei den Firmen der größeren Crawler, zukaufen.
Eigentlich wird ja nur ein Crawler benötigt. Was denkst du darüber?
0 comments :: Kommentieren
