一部の管理画面と接客配信機能で障害が発生していました

Incident Report for KARTE

Postmortem

この度発生した一部の管理画面と接客配信機能で障害が発生していましたに関する障害について、下記の通りご報告致します。


発生期間
2025/02/08 13:20頃〜15:21頃

対象のプロジェクト
KARTE InsightとKARTE Actionを利用中の全プロジェクト

発生した現象

  • 管理画面の一部が表示されない
  • イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない

    • LINE
    • Sendgrid
    • 高品質SMS(twilio)
    • mailgun(メール)
    • 自動チャットメッセージ送信
    • ネイティブアプリプッシュ通知
    • [KARTE TALK]オペレータアサイン
    • Talkリッチメッセージ送信
    • Talkマルチアクション
    • Webhook
    • Salesforce Marketing Cloud(API連携)
    • Amazon EventBridge
    • KARTE Craft接客
  • KARTE Talkにてエンドユーザーがメッセージを送信できない

発生原因

  • 影響のあった上記機能が利用する、システム内部のデータベースへ接続する際に必要な証明書の期限切れにより、データベースへアクセスできませんでした

実施した対応

  • データベースとの接続時に利用する証明書を更新しました
  • 現在発行されている証明書の期限を再度確認し、同様の障害が発生しないことを確認しました

今後の対応

  • 該当データベースの証明書の期限前にアラートを見直し正しく検知できるようにしました
  • 証明書の更新が不要な仕組みに移行を検討しています

この度はご迷惑をおかけし、大変申し訳ございませんでした。

Posted Feb 12, 2025 - 16:08 JST

Resolved

障害が解消したのでご報告します。

■ 発生期間
2025/02/08 13:20頃〜15:21頃

■ 対象プロジェクト
- KARTE InsightとKARTE Actionを利用中の全プロジェクト

■ 発生した現象
- 管理画面の一部が表示されない
- イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない
- LINE
- Sendgrid
- 高品質SMS(twilio)
- mailgun(メール)
- 自動チャットメッセージ送信
- ネイティブアプリプッシュ通知
- [KARTE TALK]オペレータアサイン
- Talkリッチメッセージ送信
- Talkマルチアクション
- Webhook
- Salesforce Marketing Cloud(API連携)
- Amazon EventBridge
- KARTE Craft接客
- KARTE Talkにてエンドユーザーがメッセージを送信できない

■ 原因
- 影響のあった上記機能が利用する、システム内部のデータベースへの接続ができていなかったため

■ 実施した対応
- 接続可能な状態を復旧しました
- 本事象の原因により影響のあった機能が正常に動作していることを確認しました

この度はご迷惑をおかけし、大変申し訳ございませんでした。
Posted Feb 08, 2025 - 15:56 JST

Monitoring

本障害の解決に向けた対応を実施しました。

■ 対象プロジェクト
- KARTE InsightとKARTE Actionを利用中の全プロジェクト

■ 発生した現象
- 管理画面の一部が表示されない
- イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない
- LINE
- Sendgrid
- 高品質SMS(twilio)
- mailgun(メール)
- 自動チャットメッセージ送信
- ネイティブアプリプッシュ通知
- [KARTE TALK]オペレータアサイン
- Talkリッチメッセージ送信
- Talkマルチアクション
- Webhook
- Salesforce Marketing Cloud(API連携)
- Amazon EventBridge
- KARTE Craft接客
- KARTE Talkにてエンドユーザーがメッセージを送信できない

■ 原因
- 影響のあった上記機能が利用する、システム内部のデータベースへの接続ができていなかったため

■ 実施した対応
- 接続可能な状態を復旧しました
- 管理画面の閲覧や一部接客が配信可能になっていることは確認が取れており、順次その他の機能についても復旧できているかを確認の上、続報を掲載いたします。
Posted Feb 08, 2025 - 15:05 JST

Investigating

管理画面の一部が表示されない、および一部接客の配信に失敗する障害が発生しています。
想定される主な影響は次の通りです。

■ 対象プロジェクト
- KARTE InsightとKARTE Actionを利用中の全プロジェクト

■ 発生している現象
- 管理画面の一部が表示されない
- イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない
- LINE
- Sendgrid
- 高品質SMS(twilio)
- mailgun(メール)
- 自動チャットメッセージ送信
- ネイティブアプリプッシュ通知
- [KARTE TALK]オペレータアサイン
- Talkリッチメッセージ送信
- Talkマルチアクション
- Webhook
- Salesforce Marketing Cloud(API連携)
- Amazon EventBridge
- KARTE Craft接客
- KARTE Talkにてエンドユーザーがメッセージを送信できない
現在、開発チームが原因を調査中です。
約1時間以内に続報を掲載します。
Posted Feb 08, 2025 - 14:43 JST
This incident affected: 管理画面, 接客の配信, and チャット.