【解決済み】接客サービスの設定変更の反映が遅れています
Incident Report for KARTE
Postmortem

接客サービスの設定反映の遅延に関する障害について、下記の通りご報告致します。

発生期間
2022年4月28日 12時30分頃 〜 17時37分頃

対象のプロジェクト
上記期間中に、接客サービスの設定を変更したプロジェクト

発生した現象
上記期間中に接客サービスの設定変更をした場合に、その反映が遅れることがありました。
※期間中の設定変更は、障害の解消時点で全て反映されています

発生原因
接客が更新された場合に発生するチェックが原因で、接客サービスの設定を保存しているデータベースのデータへの負荷が一時的に上がってしまいました。

実施した対応
接客サービスの設定を保存しているデータベースのデータへの負荷を一時的に緩和しつつ、負荷増大の要因である接客が更新された場合に発生するチェックに修正を行いました。

今後の対応
接客サービスの設定を保存しているデータベースのデータへの負荷を恒久的に緩和するために、
一定時間内に送信できるリクエスト数を制限する修正をおこないます。

この度はご迷惑をおかけし、大変申し訳ございませんでした。

Posted May 09, 2022 - 14:53 JST

Resolved
障害が解消したのでご報告します。

■ 発生期間
2022/04/28 12:30頃〜17:37頃

■ 対象のプロジェクト
上記期間中に、接客サービスの設定を変更したプロジェクト

■ 発生した現象
- 上記期間中に接客サービスの設定変更をした場合に、その反映が遅れることがありました。

※期間中の変更は、現時点では反映されています

■ 原因
- 接客サービスの設定を保存しているデータベースのデータへの負荷が一時的に上がってしまった

■ 実施した対応
- 溜まっていた設定反映要求を一時的に削除し遅延を解消しました。

※期間中に変更した接客サービスの設定内容が元に戻るなどの事象は発生していません

この度はご迷惑をおかけし、大変申し訳ございませんでした。
なお、本障害の事後対応については、追って記載します。
Posted Apr 28, 2022 - 19:37 JST
Monitoring
以下時間帯にて障害が発生したため、ご報告します。

■ 発生期間
2022/04/28 12:30頃〜17:37頃

■ 対象のプロジェクト
上記期間中に、接客サービスの設定を変更したプロジェクト

■ 発生した現象
- 管理画面での接客サービスへの編集内容が、接客配信に反映されるまでに時間がかかってしまう事象が発生しました。

■ 原因
- 調査中

■ 実施した対応
- 溜まっていた設定反映要求を一時的に削除し遅延を解消しました。

現在、障害の解決を確認するために監視を続けています。
約1時間以内に続報を掲載します。
Posted Apr 28, 2022 - 18:30 JST
Investigating
接客サービスの設定反映に遅延が発生しています。
想定される主な影響は次の通りです。

■ 対象プロジェクト
- 調査中

■ 発生している現象
- 管理画面での接客サービスへの編集内容が、接客配信に反映されるまでに時間がかかってしまう事象が発生しています。


現在、開発チームが原因を調査中です。
約1時間以内に続報を掲載します。
Posted Apr 28, 2022 - 17:54 JST
This incident affected: 接客の配信.