管理画面で障害が発生しています
Incident Report for KARTE
Postmortem

※2019/12/19 追記: 発生日時について誤りがありましたので修正いたしました。
誤: 10月
正: 12月

2019年12月10日15:10〜2019年12月11日21:07にかけて発生した、管理画面の障害に関して、下記の通りご報告致します。

発生日時

12月10日
・15:10 ~ 15:17
・15:47 ~ 16:00
・16:24 ~ 16:36
・16:52 ~ 17:03
・17:22 ~ 17:32
12月11日
・12:24 ~ 12:54

障害対象

KARTE管理画面全体

障害内容

KARTE管理画面においてレスポンスが遅くなる、またはアクセスに失敗する障害が発生しておりました。

原因

一部機能に想定以上の負荷がかかり、システム内部のDNSサーバのパフォーマンスが悪化したことで、そのDNSサーバを使用している管理画面全体が不安定な状態になっておりました。

対応

  • 想定以上の負荷があった機能を修正し、一定以上の負荷がかからないように修正いたしました。
  • DNSサーバを高負荷でも耐えられるよう設定値を調整いたしました。
  • 同様の事象が発生したときに気付けるようアラートを設定いたしました。

この度はご迷惑をおかけし、誠に申し訳ございませんでした。

Posted Dec 17, 2019 - 18:11 JST

Resolved
This incident has been resolved.
Posted Dec 11, 2019 - 12:52 JST
Investigating
管理画面で障害が発生しています。
現在、開発チームが調査を行っていますので、詳細については追ってご報告致します。
Posted Dec 11, 2019 - 12:31 JST