【解決済み】接客表示機能で障害が発生しています
Incident Report for KARTE
Postmortem

発生期間
2023年11月21日10時00分頃 〜 13時34分頃

対象のプロジェクト
接客アクションを利用中の全プロジェクト

発生した現象

接客の変更が解析基盤側に反映されるのが遅延していた
 - 元々配信されている接客を変更(配信停止等)した場合、変更が反映されるのが遅延(30分程度)していた
 - 新規で接客を作成して公開した場合、接客が配信されるのが遅延していた

発生原因

データベースの変更検知をするサーバーの一時的な不具合
 - 管理画面から保存された値の変更検知が対象時間で動作しておらず、配信基盤に変更が反映されていなかった

実施した対応

原因となったサーバーの再起動

今後の対応

接客の変更内容が反映されていない状況を検知するための監視を強化します

変更されていない状況を検知したらサーバーが自動復旧するようにしました

この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Posted Nov 30, 2023 - 18:50 JST

Resolved
障害が解消したのでご報告します。

■ 発生期間
2023/11/21 (火) 10:00 〜 13:34

■ 対象プロジェクト
- 接客アクションをご利用中の全てのお客様

■ 発生している現象
- 接客の変更が解析基盤側に反映されるのが遅延していた
 - 元々配信されている接客を変更(配信停止等)した場合、変更が反映されるのが遅延(30分程度)していた
 - 新規で接客を作成して公開した場合、接客が配信されるのが遅延していた

■ 原因
- データベースの変更検知をするサーバーの一時的な不具合
 - 管理画面から保存された値の変更検知が対象時間で動作しておらず、配信基盤に変更が反映されていなかった

■ 実施した対応
- 原因となったサーバーの再起動

■ お客様側で必要な対応
障害発生時間内に編集及び新規作成した接客サービスへの変更内容を即時反映させたい場合、下記の対応をお願いします。
障害発生時間内に編集及び新規作成した接客サービスに対して、接客サービス設定を更新の上、再度保存をお願い致します。
障害発生期間中に変更した内容は実際の設定に反映されていない状況です。
そのため、接客サービス設定において設定を更新のうえ「保存」をしていただきますと、変更内容が反映されます。
お手数ですが、ご対応頂けますと幸いです。

なお、再度保存しなかった場合も30分程度遅延して変更内容が反映されています。

この度はご迷惑をおかけし、大変申し訳ございませんでした。
なお、本障害の詳細や事後対応については、追って記載します。
Posted Nov 21, 2023 - 15:27 JST
Monitoring
■ 発生期間
2023/11/21 (火) 10:00 ~ 13:34

■ 対象プロジェクト
- 接客アクションをご利用中の全てのお客様

■ 発生している現象
- 接客の変更が解析基盤側に反映されていなかった
 - 元々配信されている接客を変更(配信停止等)した場合、変更が反映されなかった
 - 新規で接客を作成して公開した場合、接客が配信されなかった

■ 原因
- データベースの変更検知をするサーバーの一時的な不具合
 - 管理画面から保存された値の変更検知が対象時間で動作しておらず、配信基盤に変更が反映されていなかった

■ 実施した対応
- 原因となったサーバーの再起動

■ お客様側で必要な対応
障害発生時間内に編集及び新規作成した接客サービスに対して、接客サービス設定を更新の上、再度保存をお願い致します。
障害発生期間中に変更した内容は実際の設定に反映されていない状況です。
そのため、接客サービス設定において設定を更新のうえ「保存」をしていただきますと、変更内容が反映されます。
お手数ですが、ご対応頂けますと幸いです。

現在、障害の解決を確認するために監視を続けています。
約1時間以内に続報を掲載します。
Posted Nov 21, 2023 - 14:50 JST
Investigating
接客表示機能で障害が発生しています。
想定される主な影響は次の通りです。

■ 対象プロジェクト
- 接客アクションをご利用中の全てのお客様

■ 発生している現象
- 元々配信されている接客を変更(配信停止等)した場合、変更が反映されない
- 新規で接客を作成して公開した場合、接客が配信されない

現在、開発チームが原因を調査中です。
約1時間以内に続報を掲載します。
Posted Nov 21, 2023 - 12:23 JST
This incident affected: 接客の配信.