この度発生したイベントトラッキングの障害について、下記の通りご報告致します。

発生期間

• 2023年07月21日01時55分頃 〜 11時00分頃

対象のプロジェクト

• KARTE InsightとKARTE Actionを利用中の全プロジェクト
• KARTE BlocksでKARTE Insight SegmentおよびKARTE Goalを利用中のプロジェクト
• KARTE RightSupportを利用中のプロジェクト

発生した現象

• KARTE InsightとKARTE Actionを利用中の全プロジェクト

  • 障害発生期間中のイベントトラッキングが失敗しました（1日あたりに換算すると前日比で約17.5%に該当）
  • その結果、接客サービスの配信・実行が失敗しました（1日あたりに換算すると前日比で約15.0%に該当）

• KARTE BlocksでKARTE Insight SegmentおよびKARTE Goalを利用中のプロジェクト

  • イベントトラッキングが失敗する結果として、下記の現象が発生しました

    • セグメントの更新に失敗しました
    • ゴールの計測に失敗しました

• KARTE RightSupportを利用中のプロジェクト

  • イベントトラッキングが失敗する結果として、下記の現象が発生しました

    • ウィジェットの配信に失敗しました

なお、メール・LINE・Push通知などの配信については、直接的な影響は出ておりません。
しかし、イベントが発生していないことによる、間接的な影響が生じている場合があります。
（間接的な影響の例）

• メール・LINE・Push通知などのイベント応答配信

  • 障害発生期間中は、配信されませんでした

• KARTE Message、ターゲット配信

  • KARTEセグメントを用いた配信において、計測に失敗したイベントが反映されない状態で配信対象の抽出が行われました
  • karte_event_*にクエリを実行して作成しているリストを用いた配信を行なっている場合において、計測に失敗したイベントが反映されない状態での配信対象の作成や、埋め込み変数の抽出が生じました

• user情報の取得

  • LINEログインした場合でも、ユーザーにline_idが紐づきませんでした
  • メール・LINE・Push通知・SMSの購読停止/購読再開を取得できませんでした

発生原因

• イベントトラッキングで利用している一部のデータベース(Redis)において、2023/07/21 1:55分頃に証明書の更新メンテナンスをベンダー側で行いました。その際に、事前周知された内容とは別の箇所に変更が加わっており、それによって既存のデータベースとの接続認証が行えない状態となっていたことが原因です。

実施した対応

• 新規で使用可能なデータベースを作成し、接続先を切り替えました
• 上記の対応で、対象機能が安定して稼働していることを確認しました

今後の対応

• 恒久的には、証明書の作り直しを行い、本番用のデータベースへと接続し直します

再発防止策

• KARTEが使用しているデータベースに対して、ベンダー側で影響の大きいメンテナンスが行われる際に、当該メンテナンスの内容、影響範囲などの確認をベンダーと事前に密に行います。それにより、KARTEに生じうる不具合を未然に防ぐ対策、作業起因での不具合のパターンの把握、対応策を予め考え、不具合が生じた際にはすぐにサービス復帰への対応を行えるようにします
• 該当のデータベースに接続できない状況下でも、イベントトラッキング失敗率・接客配信失敗率を最小限に抑えられるアーキテクチャを目指した改善を検討します

この度はご迷惑をおかけし、大変申し訳ございませんでした。