カテゴリー: 障害報告事例

障害報告事例

【障害報告事例】MonappyからMonacoinが盗難

  バグ2つ 高負荷状態でサイト側とmonacoind側の通信タイムアウトを誘発し、DBのトランザクション処理をロールバックさせることで同一のギフトコードから複数回利用が可能なバグ サイト側でロールバック処理されても、monacoind側では送金処理が行われてしまっていたバグ この2つのバグにより、同一ギフトコードからn回の送金処理が可能になった     事象 ホット …

ネットワーク, 障害報告事例

【障害報告事例】なかなか原因を見つけにくいケーブルのトラブル

  先に結論 下記を考えて問題がない場合、手作りLANケーブルの規格外による不具合を疑う   クライアント(人) 障害時にクライアントが何かトリガーをひいていないかの確認 ・抜けたLANケーブルをスイッチに接続することで、お客様が一時対応した(ループ) ・机を移動させた、 ・セキュリティソフトを新規導入した ・UTMを導入した ・サーバを増設した、 ・ビルの停電 ・&#8230 …

障害報告事例

【障害報告事例】暫定コンフィグが再起動で消えて障害に ーーみずほ証券6月の障害 再起動したら情報消えた

    事象   処理遅延が続いた後に処理が出来ず、サービス不稼働の事態に至った     原因   再起動したら消える暫定のコンフィグのまま本番稼動し、再起動した結果、暫定のコンフィグが消えて障害に至った。     恒久対応   メモリに入った暫定設定を永続ファイルに忘れずに書き込む 設定後のダブルチェック …

障害報告事例

【障害報告事例】アズールレーン 2017年10月13日

  色々なサービスの障害報告から、 障害原因 一時対応 永久対応(再発防止策) ユーザへの補償、信頼回復術   学びます(۶•̀ᴗ•́)۶     2017年10月12日に発生した接続障害と、それに伴う緊急メンテナンスについてご案内致します。   ■経緯: 2017年10月12日21時40分頃、AWS(クラウドサーバー)提供側に通信障害が発生し、A …