古い記事
ランダムジャンプ
新しい記事

Googlebot

2003-12-02-2 [ChangeLogMemo]
nais.to へ来る Googlebot <http://www.googlebot.com/bot.html> を調査。
サーバ復旧[2003-07-29-3]から約 120 日分の access_log を調べました。
Googlebot のアクセス総数は 23415 件 (*.swf へのものは除く)。

この 120 日間の bot アクセストップ 10 です。
この ChangeLog には、だいたい1日1回来ているようです。
rank access url
  1 228 /~yto
  2 194 /~yto/tools/sufary
  3 150 /hiki
  4 140 /~yto/clog
  5 131 /~yto/tools/chalow
  6 122 /~yto/igusta
  7 120 /~yto/doc/zb/0001.html
  8 119 /~yto/doc/zb/0002.html
  9 118 /~yto/ukulele
 10 116 /~yto/tools
ところで、404 エラーは 1739 件ありました。内訳は以下の通り。
783 robots.txt
524 はてなアンテナ系
432 その他
- 「robots.txt」の整備は今後の課題です。
- 「はてなアンテナ系」とは /~yto/clog/20031201122800 のように
  末尾に 14 桁の数字がついているものです。これについては、
  <http://blog.bulknews.net/mt/archives/000578.html> をどうぞ。
  [2003-09-04-2]もどうぞ。
- 「その他」は昔の日記に書かれた相対 URL とか CGI のタイムアウトな
  どですね。