datahubジョブ実行 及び ターゲット配信が遅延する事象が発生しておりました。

datahubジョブ実行及びターゲット配信が遅延する事象が発生しておりました。

Incident Report for KARTE

Resolved

本障害の原因を解消しましたのでご連絡致します。

■ 根本原因
ジョブフロー内で日付計算を行う処理に不具合があり、特定の条件下でサーバ負荷が上昇してしまう不具合がございました。
サーバ負荷の上昇に伴い、同一のサーバ内で処理を行っていたターゲット配信とジョブフローの処理に時間がかかり、処理の大幅な遅延や、処理が遅延したことによるタイムアウトでのエラーが発生しておりました。

■ 本格対応
問題のある処理を特定し、サーバ負荷が上昇しないようにロジックの修正を行い、問題が再発しないことを確認いたしました。

■ 今後の対応
サーバ負荷の監視を強化し、問題の早期発見と早期対応を可能とするように社内体制の整備を行っていきます。

Posted Nov 11, 2020 - 15:02 JST

Monitoring

■ 直接事象と原因
サーバの負荷が一時的に上昇し、datahub ジョブ及び、ターゲット配信が該当期間の間配信されない事象が発生しておりました。

■ 該当期間
10月11日19時頃〜22時頃

■ 暫定対応
対象のサーバを再起動し、停滞していたdatahubジョブ及びターゲット配信が実行されることを確認致しました。

引き続き詳細な原因調査を行います。
この度はご迷惑をおかけいたしました。

Posted Nov 10, 2020 - 22:37 JST

This incident affected: 接客の配信.