hadoop1234のブログ

hadoop1234のブログ

ブログの説明を入力します。

Amebaでブログを始めよう!
今週はディープな週でした。

月曜日出社するなり、社内グループウエアが遅いって連絡が。。
月曜日はいつも遅いからこのままほっといても10時までには落ち着くかな?
と思っていたら、9時頃にはめちゃんこ遅い感じに。。

これはやばいとサポートに連絡したり、vCenter見たり、調査していると
そのうちにメールの受信が遅いと連絡が何件か入ってくる。

え?え??事態が悪化している。。やべー。
原因はメールサーバ? でも何もしてないし・・。
とりあえず、グループウエアがメールの着信を監視している設定をオフしてみる。
メールと切り離せばこれでグループウエアは安泰だよね。ヨシ!!
しかし、多少改善したけど、安定しない。。はっきり言うと遅い。
でも一応動いている。

ストレージやらなんやら確認してもエラーやアラートも出ていないし、
特に対策も見つからず時間がすぎていく。。。
ただ、グループウエアとメールサーバは同じストレージのLUNにあるのでここが怪しいだが。。

夕方位になると症状が改善し、夜になるとすっかりパフォーマンスは通常通りになってしまった。
今日は、上司と相談して様子見ってことになった。

そして翌日、恐怖のはじまりだった。
出社するなり、グループウエアが昨日よりもさらに遅いと連絡。
確かに遅い。。もはや我慢して使えるレベルではない。。
あまりに遅すぎてエラーが起きる始末。

しばらくするとメールが受信できないと連絡が入る。まったく使えない状況になってしまった。

しょうがない、一旦メールサーバを落としてストレージを引っ越そう。
引っ越し開始、、、全然進まない。。。さんざん待たせあげく、エラーを吐いて終了。
くっ!ストレージを再起動したいがVMはすべてこのストレージ上だし、許可を取るのも
時間掛かりそう。

もう一度移動してみる。すると、今度はvCenterに異常が!
ESX1号機が応答なしに! 
ぎゃー。

移動を停止してもなかなか止まらない。
そうこうしている内に今度は3号機が。。。

上司がつぶやく。「くそう、福島原発みたいだ。。」