Ａｎｉｋｉのブログ ＜アメ車道場＞
アメ道が壊れた！
２月２８日夜から突然アメ道が壊れた！
いやはや疲れました・・・
トップページは何とか表示する物のＣＧＩを使った部分がエラーしまくりです！
ブログや掲示板が全滅状態です
すぐにサーバーへ連絡を取りたいが夜間は電話受付がない
メールを出したがいつ返事が有るのやら？？？
ナリさんから電話まで頂いて 皆さんが心配している様子が手に取るように・・・
メールが来た アメ道や他のサイトの方が使っている共同サーバーがハングアップしているようで 何かのＣＧＩが暴走しているようです
修復の依頼は出しておいたので早く直るのを待つしかないぞ・・・
３月１日朝 ガ〜〜〜〜ン まだおかしい？？？
再度修復依頼のメールを送信
午後２時過ぎ まだまだおかしい！！！！
メールが来た！
当初、同じサーバーを使っている方のエラーかと思っていたのですが よくよく調べてもらったら アメ道内で原因が有るとの連絡が有りました
暴走してしまっているＣＧＩファイルは強制終了済みなので本来正常に戻っているはずだが まだ暴走しているようだと 該当するＣＧＩのエラー部分を修正して頂くかファイルを削除して頂くしか有りません・・・」だと！
オイオイ！ Ａｎｉｋｉが作ったプログラムが原因かよ！
そいつはまずいぞ！
しかし、変だな〜〜？ ２８日の夜から急におかしくなったが この数週間プログラムは変更していないし 何でだろうか？
まあ〜悩んでも始まらない・・・
とにかく何とかしなくては・・・
サーバー内で暴走してしまったファイルを遠隔地から強制終了させるための方法を教えてもらい やっては見たがこいつがメチャ面倒です！
Telnetと言う接続方法を使うのですが 昔のＤｏｓのような真っ黒な画面で マウスもまともに使えず 何をやるにしてもコマンドをキー入力しなくてはいけません
１５年以上前のパソコンをさわっているようです
サーバー状況を確認するコマンド「ps -ux」を入力してエンター！
出てきた！出てきた！
暴走してしまって固まっていると思われるファイルが・・・
２０個くらい見えます
ファイルの強制終了を行う「kill」というコマンドを入力して ターゲットと思われるファイルの動作ナンバーを入力してエンター！
一つ消えた これを５〜６回繰り返してから ちゃんと消えているか確認するために 再度 確認するコマンド「ps -ux」を入力してエンター！
あれ？？？
５〜６個消したはずなのに ２個しか消えていない？？？？
「おかしいな？？？」 もう一度確認するコマンド「ps -ux」を入力してエンター！
なんじゃこりゃ〜〜〜！
増えてる！ ２０個全開になってしまっている
頭に来た！
全速力で５ヶを「kill」！ 確認の「ps -ux」！
やった〜〜！ ５ヶ消えている！
待てよ・・・ ３０秒後 再度「ps -ux」・・・・
なんじゃこりゃ〜〜〜！
また増えてる・・・・
全部消さないとドンドン生まれちゃうのかな？？？
よしゃ！ やったるで〜〜〜！
消しては確認を２時間はやっていただろうか？
ダメです・・・
２０個全部消えることが２〜３回有りましたが すぐに生まれてしまいます
でわかったことが・・・
１２〜１３個くらい消すと掲示板やブログが正常に動くようになります
やはりこいつらが原因のようです
となるとサポートのメールにあったようにＣＧＩのファイル何とかしなくては解決しそうにありません
そこで問題が・・・
どのファイルが暴走の根源か特定できない点です
そこで考えられる各ＣＧＩプログラムのメインファイルのファイル名を一部書き換えてエラーを起こすことで暴走するところまで行き着かないようにしてみました
関連性のあるプログラムをまとめて１０本くらい選びメインファイルのファイル名を書き換え
全速力で「kill」！ 確認の「ps -ux」！を１０回くらいやって 何秒くらいで増殖してしまうかを確認
ブログやアメ道メイン掲示板、ローカル開示板、アルバム、等々
こんなことを７〜８回繰り返して また少しわかってきました
少し効果のあったファイルが３つに限定されて来ました
そのうち２つは現在あまり使っていないので プログラムＡｓｓｙで削除！
問題は雑談室で使っているwf_regi.cgiと言うファイル
このプログラムはアメ道以外にもジェットのサイトや友人のサイトでも使っていて 現在２１本が動作しています
しかし この２１本に含まれるファイルの名前を書き換えると アメ道の掲示板やブログがかなり安定してきます
さてどうしたものか？？？？
午後３時頃から初めてすでに夜１０時過ぎ ７時間もこんなことやってしまって・・・
動作本数も２１本と多いのでどれくらいアクセスが有るかちょっと確認してみました
すると恐ろしいことに！
カウンターには現れていないのですが ロボットによるスパム自動投稿が３日前の１００倍以上に跳ね上がっています
プログラム１本あたりにすると 多いときで５〜６秒に１回くらい 少ないときで２〜３分に１回くらいの割合で不正書き込みに来ています
アメ道サイト全体で見てみると 一番ひどいときは１秒間に３〜４回の書き込みに来ています
どうやら今回のトラブルの根源が見えてきました
１．海外からのロボットによるスパム投稿でアクセスが急増している点
２．スパム投稿を拒否するために掲示板プログラム内で判別作業を行っている点
３．特に雑談室はスパム投稿のログを取っているために 実際に書き込まれたのと同じくらい負荷がかかる点
まずは３．のログを止めてみることにしました
効果覿面です！
全速力で「kill」！ 確認の「ps -ux」
１分たっても ５分たっても増えてきません！
１分間隔で３０分間確認しましたが たまに１０個くらいまで増えることは有りますが ２〜３分後には減っていきます
ＣＧＩプログラムが悪かった訳では無かったのです
海外のロボットが原因でした
日付変わって２日午前２時
書き換えたファイル名を全部戻して スパムログを削除してやっと一段落
一睡もしないでそのまま夜勤突入〜〜〜〜！
2007年03月03日(土)
00:33:01
No.248
コメント
kouichi
No.267
2007/03/04/16:01:40
久しぶりに観たらずいぶんえらい事になってたんですね・・・。
Ａnikiさん本当にご苦労様でしたm（__）m
でも機械音痴にはさっぱりです・・・（＾＾；
Ａｎｉｋｉ
No.262
2007/03/04/01:19:13
そうですよね〜〜〜
何のことだか普通はチンプンカンプンだヮ！
だいたいにして、やっていたＡｎｉｋｉも初めての経験なので何がどうしてこんなことになっているんだョ〜〜って感じでしたから・・・
現在の状態は負荷のかかる処理を一端停止させているだけで ロボットの奴らの攻撃はいまだにガンガン来てます
この後どうしたらいいのやら？？？？
なっちゃん
No.261
2007/03/03/22:11:10
Anikiさん
ご苦労様でした！
なんでもやってのけるAnikiさんはすごいっすね！
自分はPC音痴でなぁ〜んもわかりませんが、
心のオアシスが正常化して良かったです。
ありがとうございました。
ひめ
No.260
2007/03/03/21:09:23
Anikiさん…おつでしたm(__)m
ナリ
No.259
2007/03/03/20:04:53
Anikiさんご苦労さまでしたm(__)m
まさかアメ道内部でのトラブルだったとは＼(◎o◎)／
海外サイトの脅威がそんなに多かったとは、ホント解らない物ですね〜(-＿-)ウーム
私も、そこまで細かいＨＰのこととなると素人なので、なかなかお力にはなれそうにありませんが、これからも、さらなるアメ道の繁栄のために頑張りま〜す（＾o＾）ゞ
そういえば、今日早速Ａ−ＣＡＲＳ買ってきました (=＾＾=)
コメント投稿
コメント削除
TOPに戻る