【解決済み】複数のページで読み込みの障害が発生しています

Incident Report for KARTE

Resolved

障害が解消したのでご報告します。

■ 発生した現象
「管理画面の一部の画面で一部の項目が表示がされない」という事象が発生しやすくなっていました。
主な画面は下記の通りです。
- 接客サービス一覧画面
- 接客サービス詳細画面

「以下の画面が表示されない」という事象が発生しやすくなっていました。
- ゴール機能画面

■ 発生した問題と対象
対象の画面で利用していた以下の機能を持つシステムがデータベースにアクセスできない状態が発生しました。
- ゴール機能
- 接客/アクションの統計情報の集計

■ 問題が発生していた期間
- 2023年5月16日 20:00頃から 2023年5月17日 10:17 まで

■ 原因
昨日の障害「【解決済み】接客機能で障害が発生しています」https://status.karte.io/incidents/kvpngq2gc9cz の影響でデータベースが過負荷状態となり、対象のサーバーがデータベースに接続できていない状態でした。
負荷が解消された後も、再接続が行われていませんでした。

■ 実施した対応
問題が発生していたサーバーを再起動しました。これにより、データベースへの接続が回復しました。

■ 再発防止策
一時的にデータベースの接続が失われた場合でも、自動的に回復できるようにします。

この度はご迷惑をおかけし、大変申し訳ございませんでした。

Posted May 17, 2023 - 13:54 JST

Monitoring

本障害の解決に向けた対応を実施しました。

■ 対象プロジェクト
- 全プロジェクト

■ 発生した現象
「管理画面の一部の画面で一部の項目が表示がされない」という事象が発生しやすくなっていました。
主な画面は下記の通りです。
- 接客サービス一覧画面
- 接客サービス詳細画面
- ゴール画面

■ 原因
- （調査中）

■ 実施した対応
- エラーが発生していたサーバーを再起動しました

現在、障害の解決を確認するために監視を続けています。
約1時間以内に続報を掲載します。

Posted May 17, 2023 - 10:52 JST

Update

We are continuing to investigate this issue.

Posted May 17, 2023 - 10:07 JST

Investigating

複数の機能で読み込みの障害が発生しています。
想定される主な影響は次の通りです。

■ 対象プロジェクト
- 調査中

■ 発生している現象
2023/05/17 09:44 時点で下記を確認しています。
　・「接客サービス詳細」が表示されない
　・「ゴール」が表示されない
　・「効果の分析」の詳細が表示されない

影響範囲や事象の詳細については追って掲載します。

現在、開発チームが原因を調査中です。
約1時間以内に続報を掲載します。

Posted May 17, 2023 - 09:48 JST

This incident affected: イベントトラッキング, 管理画面, 解析, 接客の配信, チャット, KARTE Blocks, Api v2, KARTE Datahub, KARTE Live, KARTE RightSupport, and KARTE Message.