クローラー

先日来の自社サーバー負荷増大ですが、いろいろと対処をして、かなり落ち着いてきました。先週一週間はこれのせいで本当に疲れたヨ・・・で、原因のひとつとしてあげていたのが検索エンジンクローラーの頻繁なアクセスなんですが、それを証明する（誰に？とい...