【解決済み】KARTE message βの配信機能で障害が発生しています
Incident Report for KARTE
Postmortem

この度発生したKARTE Message βの配信機能に関する障害について、下記の通りご報告致します。


発生期間

  • 2023年11月06日 17時01分頃〜19時40分頃

対象のプロジェクト

  • KARTE message βをご利用中のプロジェクト。

発生した現象

  • 全てのチャネルのキャンペーンにおいて以下事象が発生していました。

    • 配信対象プレビューに失敗する。
    • キャンペーンステータスが配信エラーとなり、配信ができない。
  • また上記に付帯して、以下事象が発生しておりました。

    • Datahubクエリによる一部テーブルへのアクセスができない。

発生原因

  • キャンペーン配信時にKARTEが内部的に参照しているデータを権限の喪失により参照できない状態であったことが原因で、配信エラーが発生していました。

実施した対応

  • KARTEが内部的に参照しているデータを参照できるよう対応いたしました。

今後の対応

  • 今回の障害への再発防止として以下の対応を行います。

    • 閲覧権限の外形監視の強化

      • 権限を外形監視し、過剰な権限や権限が意図せず失われた際にすぐに検知、復旧ができるよう状態を作ります。
      • 本強化により、テストだけでは検知することができなかった、権限の意図しない削除を検知することができます。

この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Posted Nov 16, 2023 - 10:48 JST

Resolved
障害が解消したのでご報告します。

■ 発生期間
2023/11/06 17:01頃〜19:40頃

■ 対象プロジェクト
- KARTE message βをご利用中のプロジェクト。

■ 発生した現象
- 全てのチャネルのキャンペーンにおいて以下事象が発生していました。
 ・配信対象プレビューに失敗する。
 ・キャンペーンステータスが配信エラーとなり、配信ができない。

- また上記に付帯して、以下事象が発生しておりました。
 ・Datahubクエリによるデータセット masspush_event_log_regional へのアクセスができない。

■ 原因
- キャンペーン配信時にKARTEが内部的に参照しているデータを参照できない状態であったことにより配信エラーが発生していました。

■ 実施した対応
- KARTEが内部的に参照しているデータを参照できるよう対応いたしました。

この度はご迷惑をおかけし、大変申し訳ございませんでした。
なお、本障害の詳細や事後対応については、追って記載します。
Posted Nov 06, 2023 - 19:48 JST
Investigating
KARTE message βの配信機能で障害が発生しています
想定される主な影響は次の通りです。

■ 対象プロジェクト
- KARTE message βをご利用中のプロジェクト。

■ 発生している現象
- 全てのチャネルのキャンペーンにおいて以下事象が発生しています。
 ・配信対象プレビューに失敗する。
 ・キャンペーンステータスが配信エラーとなり、配信ができない。

現在、開発チームが原因を調査中です。
約1時間以内に続報を掲載します。
Posted Nov 06, 2023 - 18:12 JST
This incident affected: KARTE Message.