Index: [Article Count Order] [Thread]

Date: Sun, 05 Apr 2009 12:11:29 +0900
From: ごりゅ <sakura@usamimi.info>
Subject: [info-ml:00157] [障害情報] 4/5 	7:00頃〜11:40頃
To: usamimi infomation <info-ml@usamimi.info>
Message-Id: <20090405031130.6E03B7EC57@smtp.usamimi.info>
X-Mail-Count: 00157

おはようございます。
ごりゅです。

今朝(7:00頃)負荷分散を行っているサーバー2基(r-moon,yukari)がダウンしました。
気付くのが遅れた為に、対応に遅れが出ています申し訳ございません。

機能的には暫定的に復旧させましたが
ダウンした2基の内1基(yukari)については現在も復旧作業中です。
usamimi.infoからは切り離しておりますので影響はありません。

・概要
障害:負荷分散サーバー2基のダウン
影響時間:7:00頃〜11:40頃
原因:新しいHTTPアクセラレータの試験による事故(詳しくは後述)
対処:サーバーの再起動とHDDのチェック、Varnishの設定の見直し

・原因について
usamimi.infoの負荷分散サーバーにはpoundと呼ばれるロードバランサーと
静的ファイルを処理するWEBサーバー(Apache)が稼動していますが
より速く、よりメインサーバーに負荷が掛からないようにする為に
Varnishと呼ばれるHTTPアクセラレータを導入する計画を行っていました。
参考URL
http://ja.wikipedia.org/wiki/Varnish_cache
http://journal.mycom.co.jp/news/2007/07/23/037/index.html

ダウンした直接的な原因は、キャッシュファイルの指定に
不備がありHDDのパーティションが溢れてしまった事と思われます。

皆様には御迷惑をおかけして申し訳ありませんでした。
以上です。

何か連絡がある場合はこのアドレス宛には返信できませんので
「sakura@usamimi.info」までお願いします。

\e
--------------------------
ふろむ:goryu
めいる<sakura@usamimi.info>
ほーむ<http://www.usamimi.info/>