【解決済み】KARTE が自動発生させる一部のイベントが遅延する事象が発生しました
Incident Report for KARTE
Postmortem

KARTE が自動発生させる一部のイベントが遅延に関する障害について、下記の通りご報告致します。


発生期間
2022年5月23日 19:00頃〜23:40頃

対象のプロジェクト
KARTE Insight と KARTE Action を利用中の全プロジェクト

発生した現象
データーベースとの接続不良よりイベントの処理キューが滞留してしまい
そのために、イベントが処理されない状態となってしまた。

発生原因
データベースとの接続に利用するクライアント証明書のエラーによる接続不良が発生してしまいました

実施した対応
データベースとの接続時に利用する証明書設定を変更しました

今後の対応
データベースとの接続に利用するクライアント証明書の置き換えを行い、
クライアント証明書の正当性の検証を自動で定期的に行うようにします

この度はご迷惑をおかけし、大変申し訳ございませんでした。

Posted May 26, 2022 - 11:06 JST

Resolved
障害が発生しましたのでご報告致します。
なお、事象は解消しております。

■ 発生期間
2022/5/23 19:00頃〜23:40頃

■ 対象のプロジェクト
- KARTE Insight と KARTE Action を利用中の全プロジェクト

*期間中の遅延したイベントはすべて処理が完了しております

■ 発生した現象
- KARTE が自動発生させる一部のイベントが遅延する
- 対象のイベント例
- manual_label
- manual_chat_label
- talk_message_send
- _merge_user
- など

■ 原因
- データーベースとの接続が不安定になりイベントを処理するためのキューの滞留が発生した結果、
イベントが処理されない状態になりました

■ 実施した対応
- データベースの接続設定を変更することで事象が解消しております

この度はご迷惑をおかけし、大変申し訳ございませんでした。
Posted May 24, 2022 - 13:10 JST
This incident affected: イベントトラッキング.