【解決済み】ユーザーの解析処理で遅延が発生しています
Incident Report for KARTE
Postmortem

この度発生したユーザー解析機能に関する障害について、下記の通りご報告致します。


発生期間

  • 2023年11月17日09時18分頃 〜 10時08分頃

対象のプロジェクト

  • KARTE Insightを利用の全プロジェクト

対象機能

  • ユーザー解析機能

発生した現象

  • 下記において平常時よりも時間を要するケースがございました。

    • イベントデータのユーザーデータへの反映
    • ユーザーのセグメントやディメンションの更新
    • 接客の配信

発生原因

  • ユーザーデータ解析基盤の負荷が一時的に上昇し、処理遅延が発生したため。

実施した対応

  • 負荷を軽減するため、利用するサーバー台数を増やしました。

今後の対応

  • ユーザーデータ解析基盤の負荷が高まった際の自動スケールアップの性能を向上します。

この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Posted Nov 17, 2023 - 18:43 JST

Resolved
障害が解消したのでご報告します。

■ 発生期間
2023/11/17(金) 09:18 〜 10:08

■ 対象プロジェクト
- KARTE Insightを利用の全プロジェクト

■ 対象機能
- ユーザー解析機能

■ 発生した現象
- 下記において平常時よりも時間を要するケースがございました。
- イベントデータのユーザーデータへの反映
- ユーザーのセグメントやディメンションの更新
- 接客の配信

■ 原因
- ユーザーデータ解析基盤の負荷が一時的に上昇し、処理遅延が発生したため。

■ 実施した対応
- 負荷を軽減するため、利用するサーバー台数を増やしました。

この度はご迷惑をおかけし、大変申し訳ございませんでした。
なお、本障害の原因詳細や事後対応については、追って記載します。
Posted Nov 17, 2023 - 15:28 JST
Monitoring
本障害の解決に向けた対応を実施しました。
現在は解析遅延状態の解消が確認されています。

■ 対象プロジェクト
- KARTE Insightを利用の全プロジェクト

■ 対象機能
- ユーザー解析機能

■ 発生期間
現時点で、解析遅延が発生する割合が高かった状態が確認されているのは下記の時間帯です。

- 2023/11/17(金) 09:18 〜 10:08 (JST)

■ 発生した現象
- イベントデータがユーザーデータに反映されるまでに、平常時よりも時間がかかる可能性がありました
- ユーザーのセグメントやディメンションが更新されるまでに、平常時よりも時間がかかる可能性がありました
- 上記の結果として接客配信に平常時よりも時間がかかる可能性がありました
- イベントデータが一部欠損している可能性がございます

■ 実施した対応
- 負荷を軽減するため、利用するサーバー台数を引き上げました

現在、障害の解決を確認するために監視を続けています。
Posted Nov 17, 2023 - 11:00 JST
Investigating
イベントトラッキングが行われてからユーザー解析処理が完了するまでの間に、遅延が発生している可能性がございます。
想定される主な影響は次の通りです。

■ 対象プロジェクト
- 全プロジェクト

■ 対象機能
- ユーザー解析機能

■ 発生している現象
- イベントデータがユーザーデータに反映されるまでに、平常時よりも時間がかかる可能性があります。
- ユーザーのセグメントやディメンションが更新されるまでに、平常時よりも時間がかかる可能性があります。
- 上記の結果として接客配信に平常時よりも時間がかかる可能性があります。
- イベントデータが一部欠損している可能性がございます。

現在、開発チームが原因及び影響を調査中です。
調査に進捗があり次第、続報を記載いたします。
Posted Nov 17, 2023 - 10:36 JST
This incident affected: イベントトラッキング, 解析, and 接客の配信.