障害の詳細と対応方法が決定したのでご報告します。
■ 発生期間
2022/07/09 08:30頃〜 2022/07/11 19:29頃
■ 対象のプロジェクト
KARTE Datahubのジョブフロー機能を使用し、ファイルパスに動的日付を指定して2GBより小さいファイルをS3からインポートするジョブを実行したプロジェクト
■ 発生した現象
S3からのインポートを行うジョブフローで2GBより小さいファイルをインポートした際に、以下のエラーによりジョブが失敗する現象が発生しておりました。
[{“reason”:“internalError”,“message”:“An internal error occurred and the request could not be completed. This is usually caused by a transient issue. Retrying the job with back-off as described in the BigQuery SLA should solve the problem: https://cloud.google.com/bigquery/sla. If the error continues to occur please contact support at https://cloud.google.com/support. Error: 80324028"}]
■ 原因
GCPの仕様変更に伴いKARTE側の日付を元に動的にファイルパスを指定するロジックに不整合が発生した。
■ 実施した対応
GCPの仕様変更に追従する修正を行いました。
■ 今後の対応
日付を元にした動的なファイルパスを指定するケースについてテストケースを作成し、今後同様の事象が発生した際には検出できるようにしました。
この度はご迷惑をおかけし、大変申し訳ございませんでした。