2021/10/27
人事評価クラウド「あしたのクラウド®️」障害に関する報告とお詫び
お客様各位
平素は格別のご高配を賜り厚く御礼申し上げます。
2021年10月11日（月）から10月14日（木）にかけて人事評価クラウド「あしたのクラウド®️」において複数の障害が発生しておりました。お客様に多大なるご迷惑とご心配をおかけいたしましたこと深くお詫び申しあげます。
現在は復旧しており、今回発生したシステムの障害と原因を以下の通りご報告させていただきます。
【障害】
・あしたのクラウドへ接続できない、または接続しづらい
・目標設定時に自動添削がなされない
・メール予約送信など定時設定した処理がなされない
【障害認識の時間帯】
・2021年10月11日（月）9：00から2021年10月14日（木）15：00の間に複数回にわたり発生
・目標設定時の自動添削がなされない事象については、2021年10月11日（月）9：00から2021年10月12日（火）13：15頃まで発生
【経緯】
2021年10月11日（月）
09:00頃 あしたのクラウドへアクセスできない、またはサーバー内部エラーが発生しているというメッセージが表示されるとの報告を複数受ける
09:10頃 あしたのクラウドへアクセスできない事象を確認し、調査を開始
09:30頃 原因を特定し、各種障害の改修を開始
10:30頃 あしたのクラウドへのアクセスが可能であることを確認
2021年10月12日（火）
13:15頃 あしたのクラウドにアクセスしづらい、処理の遅延が発生
13:30頃 あしたのクラウドへのアクセスが可能であることを確認
13:40頃 目標設定時の自動添削が正常に動作することを確認
2021年10月14日（木）
13:00頃 メール予約送信などの定時処理機能が正常に動作することを確認
2021年10月22日（金）
22:00頃 緊急メンテナンスを実施
【原因】
セキュリティの脆弱性問題を解消するためのメンテナンスにおいて、以下の設定に不備があった。また修正したプログラムを本番環境に反映する際、環境へのアクセス負荷が想定を超えて高くなり、不安定な状態になっていた。
・アクセスや処理が集中してサーバーが高負荷になった際、自動的にサーバー台数を増やす機能を導入していたが、設定に不備があり想定したサーバー台数に増えておらず高負荷な状態が継続していた。
・自動添削専用サーバーとの接続の設定に不備があり、目標承認依頼時にサーバーへ接続できていなかった。またエラーが検知されず、事象が把握できていなかった。
・定時処理を実行する権限の設定に不備がありメールが送信されていなかった。加えて、権限付与後の時間設定の誤りにより、指定した時刻から９時間ずれて送信される事象が発生していた。
【再発防止策】
・メンテナンスにおける設定不備を解消する仕組みを導入し、品質保証に関する社内の体制を強化する。
・障害発生に備えた情報の可視化および外形監視の精度をあげる。
・定時処理の開始終了をタイムリーに監視できる仕組みを導入する。
当社は、再発防止・信頼回復のため今後もあらゆる障害発生を想定した組織体制を築いてまいります。
会社概要
会社名 ：株式会社あしたのチーム（https://www.ashita-team.com）
代表者 ：代表取締役社長CEO 赤羽博行
所在地 ：東京都中央区銀座6-10-1 GINZA SIX 13F
事業内容：・人事評価制度の構築・運用「あしたのチーム®」
・人事評価クラウド「あしたのクラウド® HR」
設立 ：2008年9月25日