1億のサーバはFASTネットワークよりクロール拒否

FASTのStephen Bakerによると、世界に3億あるクロール可能なサーバのうち2/3はスパムを理由にクロールを拒否しているそうです。それだけ検索エンジンスパムの横行が絶えないということですね。
FAST’s Director of Business Development and Marketing, Stephen Baker, has stated that globally there are approximately 30 million crawl-able servers and approximately two-thirds have been banned by the FAST network for spamming. If these numbers are correct, your site may be blacklisted or penalize for “guilt by association.” [Kevin Kantola / CEO of SEO Resource / "Avoid Search Engine Blacklisting" / SearchEngineJournal]

今後のウェブアーカイブを考えると重要な指摘です。