goo ブログ検索のクローラは2種類あるらしい
Web & Internet Comments (0) | Trackbacks (0)ここ2日間くらい goo ブログ検索に関して Apache のログとにらめっこしています。そして、わかったことは goo ブログ検索のクローラは2種類あるらしいこと。具体的には「gooblog/2.0」と「gooblogsearch/2.0」。
goo ブログ検索の2つのクローラ
- gooblog/2.0:更新 ping を送るとやってくるクローラ。サイトトップにアクセスしたあと、index.rdf を見に行く
- gooblogsearch/2.0:実際にインデックスしているクローラ。こいつが来た時点で最終更新日時が最新の記事の時刻に更新される
最近のコメント
2012/2/6 22:53
2012/2/6 17:14
2012/2/5 6:07
2012/2/3 22:03
2012/2/3 2:11
2012/1/27 14:11
2012/1/26 3:30
2012/1/16 22:40
2012/1/26 3:10
2012/1/15 17:20