[Yahoo!メール]お問い合わせの件について | 渡部遼介オフィシャルブログ「Ryosuke’ Note」powered by アメブロ

[Yahoo!メール]お問い合わせの件について

その後も、数時間おきに連絡が届く。


---
遅くなって大変申し訳ございません。Yahoo!メールカスタマーサービスです。


恐れ入ります、ご連絡いただいておりました件ですが、今回の事象が大きかったことから一度【サーバ障害報告書】を提出していただく必要がございます。

お手数ですが、下記概要をお読みになって頂いた上で、メールにて「はじまり線~おわり線まで」を貼付けコピーしていただき、最後に本人事項欄のご署名が終わりましたら Yahoo!メールカスタマーサービス:info@customer-support.jp までご返信ください。


なお、サーバ障害報告書のご確認後、直ちに問題解決へ取り掛からせていただきます。

急を要する事由なためメール内容をご確認後、取り急ぎのご対応お願いします。



--------------ここから本文をコピーください(はじまり線)--------------

【サーバ障害報告書】

■概要
2009年3月27日(金) 12:00-12:30の間、サーバー上で蓄積されていた該当ユーザーの送受信ログのデータの集合体が許容量を超える過多の影響で削除一覧表示機能が無応答となりました。
サーバの再起動、およびデータベースに対する同時接続数の増加を行い、当面の現象は一時的に回避。不具合を対策したモジュールの入れ替えを行ってはみたが完全な修繕ができず現在に至る。

■現象
2009年3月27日(金) 11:50より、データベースの信号呼び出しへの負荷が通常の100倍に増加。
12:00-12:30の間、サーバー上で蓄積されていた該当ユーザーの送受信ログのデータの集合体が許容量を超える過多の影響で削除一覧表示機能が無応答となりました。
送受信ログを構成するサーバX、サーバYを調査したところ、サーバXのデータベースに信号を呼び出しするプロセスがダウンしていました。

■原因
11:50より、サーバー上で蓄積されていた該当ユーザーの送受信ログのデータの集合体が許容量を超えるまで一度も削除せずに放置状態が続いていたため、データベースの信号呼び出しへの負荷が通常の100倍に増加。
よって同時接続の増加により、データベースでの同時接続アクセス数を超過。
データベースからエラーが返った時点で、エラーを想定しない処理となっていたため、サーバのプロセスがダウン(問題点)。サーバのプロセスがダウンしたため、削除一覧表示機能全体の処理が停止し、無応答となりました。

■対策
サーバXを再起動し、関連プロセスを再起動することで、プロセスを一時的に復旧。同時にデータベースへの同時接続数を増やすことで障害の原因を暫定的に一時回避しました。
このままでは、アクセスが増大した場合に、一部ユーザーのレスポンスが悪化します。原因を対策したモジュールを入れ替えることが適当であるかシミュレーションテストの検証結果次第で技術的導入も視野に検討する。

■経緯
2009年3月27日(金) 11:50頃 ユーザからのアクセスが通常時の100倍に増大。
12:00 データベース接続プロセスがダウン。
12:10 監視アプリケーションによりプロセスダウンを検知。担当オペレータに通知。
12:15 担当オペレータより最高技術責任者(CTO)に連絡。調査開始。
12:30 ログ採取後、サーバXの再起動を実施。サービスを再開。
13:00 午後1時から午後5時までサーバーメンテナンス実施。データベースのログより同時接続数を超過した場合のエラー処理に問題があると判明。同時接続数の上限を変更。
15:00 午後3時にメンテナンス完了したことを追記。
2009年3月28日(土) プログラムでの障害発生箇所を確認。同様の問題がないか見直しを実施。
現在に至る。

■署名(本人事項欄)

 私(        )は、サーバ障害報告書について、当該事実に間違いないことを確認いたします。

□ご署名日:平成21年  月  日( )


※署名(本人事項欄)は、日本での署名捺印に代わるものとして、本人の署名であることに間違いないことを証明するものです。従って、代理人による署名は一切認められません
※署名欄の照会において、登録情報と一致しなかった場合、問題解決した際のご連絡を差し上げる事ができません。またセキュリティ上、ご本人様が使用されているメールアドレス以外からご連絡いただいた場合も、同様に案内を差し上げることができませんのでご注意ください。
※サーバ障害報告書は原則として返却致しません。尚、第三者に公開することは一切ございません。また、直ぐにサーバ障害報告書を提出できない場合や、ご登録のパスワードがわからない場合は、お伝えください。

--------------ここまで本文をコピーください(おわり線)--------------


何とぞご理解とご協力をお願い申し上げます。

これからもYahoo! JAPANをよろしくお願いします。



―――――――――――――――――――――――――――
Yahoo!メールカスタマーサービス[607]
□ご質問・お問合せフォーム:info@customer-support.jp
サポート受付時間:平日10:00~18:00(土日祝日を除く)
―――――――――――――――――――――――――――
※当メールは送信専用アドレスより送信されております。このメールの差出人宛に返信されましても回答は行えません。