複数環境で作成したサービスの管理画面にアクセスができないメンバーがいる

Incident Report for microCMS

Postmortem

<内容>

一部のアカウントにおいて、複数環境の管理画面を閲覧できない

<影響詳細>

対象者が管理画面にアクセスして、開発作業や運用作業を行うことができない

<発生期間>

2025/5/26(月) 11:50 〜 2025/5/26(月)13:47

<原因>

開発チームによる不要データの削除のオペレーションの中で、処理対象のデータの抽出ロジックに誤りがあり、削除してはいけないメンバーのデータが削除されたため

<対応>

作業前のメンバーのバックアップデータを元に、データの再投入を行い、復旧を行いました

<再発防止>

  1. 処理対象のデータについて、開発環境を対象とした実行を含め、複数回の正常性の検査を行う

    1. 今回のケースにおいては、対象件数/対象のデータ内容の2つの観点から、事前に気づくことができた可能性があります
  2. データ整備のオペレーションにおいては、復旧用のスクリプトを用意しておき、想定外の処理結果となった場合も、即時に戻すことができるようにします

Posted May 28, 2025 - 11:33 JST

Resolved

全件のデータの復旧を確認しております。
原因と再発防止の詳細については、以下のURL内にて、更新を行ってまいります。
https://status.microcms.io/incidents/4vm5zq5wl8r1
Posted May 26, 2025 - 14:06 JST

Monitoring

復旧の処理が一通り完了しております。
復旧データの確認を追って実施しています。
Posted May 26, 2025 - 13:47 JST

Update

現在復旧のスクリプトを実行中です。
Posted May 26, 2025 - 13:35 JST

Update

リストア用データと復旧スクリプトの準備が完了し、実行前の確認を進めています。
Posted May 26, 2025 - 13:07 JST

Update

原因については、特定のメンバーにおいて、複数環境で作成されたサービスから、
メンバー削除されていることが起因していることを確認しております。

リストアに向けての作業を調整中です。

1時間以内に再度進捗状況をアップデートいたします。
Posted May 26, 2025 - 12:50 JST

Identified

現在状況を確認して、開発チームにて調査、復旧を進めています。
Posted May 26, 2025 - 12:30 JST
This incident affected: 管理画面.