現在、KARTEのBigQuery内のイベントデータが二重に書き込まれる事象が発生しています。
Incident Report for KARTE
Postmortem

1. 概要

KARTEのイベントデータが二重に保存され、一回しか起きていないイベントが実際より重複してカウントされてしまう事象が発生致しました。

2. 発生期間

  • 事象発生〜復旧まで:2020/2/13 18時00分 〜 2020/2/15 11時40分
  • 二重で書き込まれたデータの期間:2020/2/13 18時00分〜2020/2/14 09時12分

3. 詳細

  • 事象1:ユーザーダッシュボードなどの接客ゴール集計が実際より多く表示される。
  • 事象2:datahub ジョブで、event_table をクエリで参照しているジョブがイベント二重計算で実行される可能性がある。

4. 影響範囲

「2. 発生期間」の期間で、「3. 詳細」に記載の機能。

5. 直接原因

イベントデータ書き込み時に、データを二重に書き込むロジックを埋め込んだ。

6. 本格対応

下記の対応を実施致しました。

  • イベントデータを書き込むロジックを修正。
  • 二重で書き込んだデータを一意にするようにデータを復旧。

7. 今後の対策

二重で書き込まれた場合でも一意のデータとして扱うようにロジックを修正する

このたびはご迷惑をおかけして、誠に申し訳ございませんでした。

Posted Feb 17, 2020 - 18:06 JST

Resolved
■ 復旧作業
残となっておりました、2/14分0:00-09:12分のデータについて復旧作業が完了いたしました。

本連絡を持って事象が解消となります。
この度はご迷惑をおかけし申し訳ございませんでした。
Posted Feb 15, 2020 - 12:33 JST
Update
■ 事象について
2/13 18:00 - 2/14 09:12の間、KARTEのイベントデータの保存が二重にされる事象が発生し、一回しか起きてないイベントが実際より重複してカウントされてしまう事象が発生しております。

それにより、ダッシュボードでイベントの発生チャートを見た時に実際より多く計測が集計されているなどの事象と、該当時間のイベントを含むdatahub上でのジョブ実行に影響がある可能性がございます。

■ 影響範囲
- 解析には影響ございません。
- 接客サービスの配信に影響はございません。
- 対象の時間帯に計測されたイベントが、接客サービスのゴール集計の表示に影響がある場合がございます。
- 対象の時間帯に計測されたイベントで、datahubの karte_event のテーブルを使用しているジョブに影響がございます。


■ 復旧作業
2/13分のデータについて復旧作業が完了いたしました。2/14分0:00-09:12分のデータにつきまして引き続き復旧作業を行います。
復旧作業が完了しましたら再度お知らせ致します。
Posted Feb 14, 2020 - 20:21 JST
Identified
■ 事象について
2/13 18:00 - 2/14 09:12の間、KARTEのイベントデータの保存が二重にされる事象が発生し、一回しか起きてないイベントが実際より重複してカウントされてしまう事象が発生しております。

それにより、ダッシュボードでイベントの発生チャートを見た時に実際より多く計測が集計されているなどの事象と、datahub上でのジョブ実行に影響がある可能性がございます。

■ 影響範囲
- 解析には影響ございません。
- 接客サービスの配信に影響はございません。
- 対象の時間帯に計測されたイベントが、接客サービスのゴール集計の表示に影響がある場合がございます。
- 対象の時間帯に計測されたイベントで、datahubの karte_event のテーブルを使用しているジョブに影響がございます。


■ 復旧作業について
イベントデータを修正する復旧作業を行っております。
Posted Feb 14, 2020 - 10:44 JST
This incident affected: 管理画面.