け〜くんこと K.Ktouth のだらだらした日常と突発的に作るプログラムや読み物とかの雑多サイト
カレンダー機能を追加した頃から、急激にカウンターが増え始め、こんな適当な日記サイトにもかかわらず1日で1000カウントを突破するという事態に!
これが普通に訪問者がこれだけ来た……と言う証なら非常に嬉しい話なんですが、そんなわけもなく。当然ながら何らかのボットによるサイトキャッシュが行われているんでしょう。
tDiaryはリファラーを随時記録する上に、その間はデータファイルを排他ロックするため1リクエストでもそれなりの時間がかかります。つまりボットが集中してアクセスしてくると大変なことになります。
……ここらで一度、ボット周りの更新をしてみました
さくらのレンタルサーバの場合、標準でアクセス解析を持っていて内部で自動的にログを取ってくれていますので、まずはユーザーエージェントのチェック。
18820 16.62% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET 16486 14.56% Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; .NET CLR 1 9366 8.27% WWWC/1.04 7445 6.57% Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0; SLCC1; .NE 5890 5.20% Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.co 5223 4.61% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1) 4084 3.61% Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/ 4048 3.57% ichiro/3.0 (http://help.goo.ne.jp/door/crawler.html) 3626 3.20% WebAuto/3.41 (WinNT; I) 2930 2.59% Yeti/0.01 (nhn/1noon, yetibot@naver.com, check robots.txt dai 2472 2.18% Mozilla/5.0 (Windows; U; Windows NT 5.1; ja; rv:1.8.1.12) Gec 2300 2.03% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1) 1756 1.55% DoCoMo/2.0 SH902i (compatible; Y!J-SRD/1.0; http://help.yahoo 1233 1.09% Mozilla/5.0 (Twiceler-0.9 http://www.cuill.com/twiceler/robot 1141 1.01% DoCoMo/1.0/N505i/c20/TB/W20H10 (compatible; Googlebot-Mobile/ 1048 0.93% Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1) 996 0.88% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0) 910 0.80% Baiduspider+(+http://www.baidu.com/search/spider_jp.html) 873 0.77% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; .NET CLR 1 795 0.70% msnbot/1.1 (+http://search.msn.com/msnbot.htm) 695 0.61% Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; .NET CLR 2 661 0.58% DoCoMo/1.0/N505i/c20/TB/W20H10 (compatible; RFCrawler-Mobile/ 595 0.53% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0; .NET CLR 1 571 0.50% SoftBank/1.0/911SH/SHJ002/SN353686012421581 Browser/NetFront/ 537 0.47% Mozilla/4.0 (PSP (PlayStation Portable); 2.00) 521 0.46% Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; IEMB3; IEM 480 0.42% Vodafone/1.0/V705SH (compatible; Y!J-SRD/1.0; http://help.yah 457 0.40% Opera/9.0 (Windows NT 5.1; U; en) 443 0.39% Mozilla/4.0 (compatible; MSIE 6.0; Windows 98; Win 9x 4.90) 419 0.37% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; Mozil 405 0.36% Mozilla/5.0 (Windows; U; Windows NT 5.0; ja; rv:1.8.1.12) Gec 375 0.33% Mozilla/4.0 (compatible; MSIE 6.0; Windows 98) 368 0.32% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0; .NET CLR 2 343 0.30% Mozilla/5.0 (X11; U; Linux x86_64; en-US; rv:1.8.1.12) Gecko/ 322 0.28% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; FunWe 302 0.27% Mozilla/4.0 (compatible; MSIE 5.5; Windows 98; Win 9x 4.90) 294 0.26% Mozilla/5.0 (Windows; U; Windows NT 6.0; ja; rv:1.8.1.12) Gec 290 0.26% Mozilla/4.0 (compatible; MSIE 6.0; Windows 98; Win 9x 4.90; . 278 0.25% TurnitinBot/2.1 (http://www.turnitin.com/robot/crawlerinfo.ht 262 0.23% KDDI-CA33 UP.Browser/6.2.0.10.4 (compatible; Y!J-SRD/1.0; htt 239 0.21% DoCoMo/2.0 N902iS(c100;TB;W24H12)(compatible; moba-crawler; h 217 0.19% Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; InfoP
3月に入ってからの2週間の記録。太字の行は明らかにロボットと判断できるUAです。
このうち標準でtDiaryがボットと判断していたのはgooglebotとmsnbotだけ。使用しているバージョンが以前のものの改造だからかYahooの現在のボットが指定されていませんでした。あとはgooのボットの名前はネタでしょうか?(笑)
中国の噂の検索サイトからもボット来てますな。
とりあえず、ボット指定に追加したので、これでしばらく様子見。
これでも重さが変わらないなら根本的な対策を取らないといけないかも……
OVA『バカとテストと召喚獣 〜祭〜』上巻 [Blu-ray]
(メディアファクトリー)
新品 ¥ 4,409
中古 ¥ 3,680
OVA『バカとテストと召喚獣 〜祭〜』下巻 [Blu-ray]
(メディアファクトリー)
新品 ¥ 4,438
中古 ¥ 2,980
生徒会役員共DJCD「アニメ生徒会役員共が全部わかるラジオ、略して全ラ!...
(キングレコード)
新品 ¥ 2,253
中古 ¥ 1,850
WORKING!! 9 初回限定特装版 (SEコミックスプレミアム)
(高津 カリノ)
新品 ¥ 2,896
中古 ¥ 2,835
「声優グランプリ」公認!声優界<雀王>決定戦! <J-1グランプリ> V...
(オムニバス)
新品 ¥ 3,159
中古 ¥ 3,099
デッドライジング 2【CEROレーティング「Z」】
(カプコン)
新品 ¥ 2,740
中古 ¥ 1,019
スプリンターセル コンヴィクション
(ユービーアイ ソフト)
新品 ¥ 2,979
中古 ¥ 1,400
Xbox 360 250GB
(マイクロソフト)
中古 ¥ 25,600
学園黙示録 HIGHSCHOOL OF THE DEAD 7 オリジナル...
(佐藤 大輔)
新品 ¥ 9,800
中古 ¥ 4,879
学園黙示録 HIGHSCHOOL OF THE DEAD SECRET ...
(佐藤 大輔)
中古 ¥ 2,500
ソードアート・オンライン〈5〉ファントム・バレット (電撃文庫)
(川原 礫)
新品 ¥ 578
中古 ¥ 450
RPG W(・∀・)RLD6 ―ろーぷれ・わーるど― (富士見ファンタ...
(吉村 夜)
新品 ¥ 651
中古 ¥ 1
魔法少女リリカルなのはViVid (3)限定版 (角川コミックス・エース...
(藤真 拓哉)
新品 ¥ 1,680
中古 ¥ 1,280
魔法戦記リリカルなのはForce (3)限定版 (角川コミックス・エース...
(緋賀 ゆかり)
新品 ¥ 1,680
中古 ¥ 420
ダンジョンズ&ドラゴンズ第4版スターター・セット
(ジェームズ ワイアット)
新品 ¥ 4,980
中古 ¥ 4,311
アリアンロッド・サガ・リプレイ(5) 激闘のピースメイカー (富士見ド...
(菊池 たけし/F.E.A.R.)
新品 ¥ 693
中古 ¥ 190
アリアンロッド・サガ・コンチェルト 1 (電撃コミックス)
(佐々木 あかね)
新品 ¥ 599
中古 ¥ 90
堀さんと宮村くん(7)(ガンガンコミックスONLINE)
(HERO)
新品 ¥ 1,000
中古 ¥ 747
浅尾さんと倉田くん(3)(ガンガンコミックスONLINE)
(HERO)
新品 ¥ 690
中古 ¥ 376
7と嘘吐きオンライン―HERO個人作品集―(ガンガンコミックスONLIN...
(HERO)
新品 ¥ 710
中古 ¥ 179
ONE PIECE 65 (ジャンプコミックス)
(尾田 栄一郎)
NARUTO―ナルト― 59 (ジャンプコミックス)
(岸本 斉史)
ワンピース 海賊無双(通常版)(初回特典:オリジナルカスタムテーマ9種DLコード、ソーシャルゲーム専用レアフィギュア用コード同梱)
(バンダイナムコゲームス)
ドラゴンズドグマ(数量限定特典『バイオハザード6』体験版用DLコード同梱)
(カプコン)