Googlebot

投稿者: | 2004年1月10日

 Googlebotのフレッシュクロールは毎週数回と頻繁に来るのだが、ディープクロールがなかなか来てくれない。ログを見ると先月の10日が最後だ。30億ページ以上も巡回するとなると、そうは来てくれないか。

 先々月くらいまではサーチエンジンのロボットを一切弾くようにしていたんだけど、いったん受け入れてみると今度は早く来ないか待ち遠しくなる。などと言いながらログを眺めてしばしの現実逃避。

カテゴリー: Tech

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です