2022年10月27日に発生した障害についてのお詫び及びご報告

日頃より株式会社トドケールのサービスをご利用いただきましてありがとうございます。

この度、2022年10月27日の午前中に弊社が提供するシステム「トドケール」において、郵便物の写真を見ることができない、添付されたPDFを閲覧・ダウンロードすることができない障害が発生いたしました。

サービスをご利用の皆様におかれましては、ご不便をおかけしたことを深くお詫び申し上げます。併せて、障害は発生した状況や原因、その再発防止策をご連絡させていただきます。

事象

2022年10月27日午前0時16分頃から2022年10月27日午後12時55分頃までトドケールにおいて、郵便物の画像を見ることができない、添付されたPDFを閲覧およびダウンロードすることができない事象が発生いたしました。

原因

2022年10月26日から27日にかけての深夜において、弊社エンジニアがシステム更新のリリースを実施した際に弊社のシステムに利用されているライブラリのバージョンが自動で更新されてしまったことにより、新しいバージョンのライブラリが弊社のシステムの仕様と整合しなくなったことで、システムが正常に作動しなくなったことが原因となっております。

弊社エンジニアがシステム更新のリリースの際にライブラリが自動更新される変更に気が付かず、かつ、作業が深夜であったことから翌朝まで利用者がいなかったことで障害発生を検知するまで時間がかかってしまいました。

対応

システムを復旧するための対応といたしまして、自動で更新されたライブラリを特定し、すべてを更新前のバージョンに戻す作業を実施いたしました。これにより、2022年10月27日午後12時55分頃にシステムが完全に復旧いたしました。

再発防止策

弊社のシステムにおいて利用されているライブラリは特定の上で管理されており、その依存度や重要度に応じて、バージョンが固定化されるという措置が取られております。しかし、今回の障害の原因となったライブラリは利用範囲や影響が小さいと評価されており、バージョンを固定するという措置が取られておりませんでした。

再発を防止するため、改めて弊社システムにおいて利用されているライブラリを特定の上、その影響や重要性を見直す作業を実施し、原則としてすべてのライブラリのバージョンを固定化する措置を実施いたします。

同時にライブラリを更新する際には検証環境において十分な検証を経たのちに、手動で実施することを徹底いたします。

以上を持ちまして、ご報告とさせていただきます。改めまして、この度はご迷惑をおかけした皆様に深くお詫び申し上げます。このような事態を起こさぬよう、今後も継続的な改善に努めてまります。

株式会社トドケール　代表取締役CEO　野島　剛