5月 6, 2010

今日は障害対応で客先に直行直帰、会社に一週間以上行っていない

出勤途中でシステム障害の連絡あり、たまたま客先へ10分ほどで到達可能な場所だったりした
マシンが一台、ネットワーク経由で操作できないのに、クラスタソフトがIPアドレスを離してくれず、サービスが切り替わっても、ネットワーク的に不安定な状態で稼働していたりした。
さすがに現地で作業が必要だろうと、方針が決まるまで、途中の駅で時間潰し。結果的に現地へ赴くことになった。
CEさんにも来てもらい、サーバをチェックしてもらったが、再起動後は問題なし。中途半端な状態でOSが稼働し続けていたのでエラーログが書き変わってしまい、異常時のログが消失していたりで、原因が不明、困ったものだ。
休み明けにいきなりの障害でちょいと疲れた…。