Talk機能に関する障害のご報告

1.発生日時 2021年9月13日14:45ごろ 〜 2021年9月13日15:55ごろ

2.障害対象

• Talk機能を利用中の全プロジェクト

3.障害内容

• 管理画面上でチャットのメッセージが表示できない、時間がかかる

• エンドユーザーとオペレーターのメッセージの送受信ができない

• KARTE API V2 Talkでの以下APIでエラーが発生する

  • Talk Message Send API (Operator)
  • Talk Message Send API (User)

• KARTE Hook V2 TalkがHookリクエストが発生しない

4.原因

メッセージの重複書き込みに対する処理の変更を行いましたが、変更した一部のクエリでデータベースに対する負荷が増大する事象が発生しました。 その結果データベースサービス全体のパフォーマンス劣化が引き起こされ、チャット機能の利用に支障が生じる事態となりました。

5.対応

該当箇所を修正前の状態に戻しました

6.今後の対策

クエリパフォーマンスの事前検証の強化及び、障害発生時に早期復旧可能なシステムの構築を進めてまいります。