Previous incidents
SAML login issues
Resolved Dec 22, 2021 at 1:15am UTC
There was a configuration mistake in our web server.
We've identified the issue and provided the fix.
We're keeping an eye out on ongoing problems but they should be resolved shortly.
1 previous update
Some users cannot access the echo server.
Resolved Dec 21, 2021 at 6:59am UTC
Some users were experiencing the following problems for about 20 minutes.
・Unable to enter/exit the meeting room
・Pictograms are not updated.
・Unable to change the background
Difficult to access
Resolved Dec 17, 2021 at 1:53am UTC
There was a difficulty in accessing the site for about 10 minutes.
Realtime reflection is not working on all workspaces
Resolved Dec 1, 2021 at 9:41pm UTC
English Below
障害内容
16:38から21:41の間、リアルタイム処理を行なっているサーバーが高負荷により停止し、以下の機能が利用不可能となっておりました。
・会議室への入退出
・アイコンの右上の絵文字の変更
・ワークスペースのレイアウト変更
原因
リアルタイム処理を担っているサーバーの1台にアクセスが集中し、1つのサーバーが停止しました。その後ユーザから一斉に再接続のリクエストが走ったため、残りのサーバー群に対してもアクセスが集中し、リアルタイム処理を担っていたサーバーがすべて停止しました。
すぐに再起動を試みましたが、再接続のリクエストが短い時間間隔で送られてくることにより、再起動後すぐにサーバーが高負荷状態となってしまい、復旧に時間がかかっておりました。
対策
・一部のサーバーが停止しても、連鎖的に全てのサーバーがダウンすることを防ぐため、サーバーを増強しました。
・非効率な処理方法により、容易に高負荷を引き起こしやすい状態となっていたため、そのロジックを修正する予定です。