今年に入ってから、何度か長時間のシステム障害が発生して、ご利用の皆様
にはご迷惑をおかけしてしまい、大変申し訳ございませんでした。
障害が発生するたびに、その時の症状から考えられる原因についての対策を
してきたものの決定的な解消に至らなかったのですが、先日の障害発生時に
ようやく原因を特定しました。その後、障害を再現するテストもして、状況
を詳細に確認することが出来ました。
原因が確定できましたので速やかにシステムを改修しまして、その後の障害
再現テストもクリアして、問題がないことが判明しましたのでご報告させて
いただきます。
今回の原因は、皆様のドメイン情報が格納されているデータベースに対する
参照と、このデータベースに対する別の更新処理がぶつかるタイミングで、
さらにとある条件下でのみ発生する別の処理の時間が許容時間を越えた場合
に、DNSシステムが停止してしまうことがある、という複数要素が絡んだもの
でした。
今後も二度と不具合が発生しない、とは言い切れませんが、極力対応して、
安定運用に努めたいと思いますので、どうぞよろしくお願いいたします。