この度発生したイベントトラッキング・接客配信の障害について、下記の通りご報告致します。
■ 発生期間
2021年10月13日21時21分頃 〜 23時30分頃
■ 対象のプロジェクト
全プロジェクト
■ 発生した現象
■ 原因
システム内部的なデータベース移行の準備作業に伴い、特定のデータベースへの負荷が高まりやすい状態になりました。その後、イベント数の増加に伴い、イベントトラッキングサーバ数の増大によって、上記特定のデータベースの負荷が実際に増加。イベントトラッキング処理にかかる時間が長くなってしまい、タイムアウト率が急上昇しました。
■ 実施した対応
システムの内部的なデータベース移行に際して、イベントトラッキングサーバから特定のデータベースにアクセスしないように処理を修正しました。
■ 今後の対応
特定データベースに関連するアーキテクチャの見直しを検討致します。また、サーバーの監視体制の強化および業務フローの見直しを行います。
この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。