Previous incidents
Error might occur due to the instability of the server
Resolved Feb 28, 2022 at 8:12pm UTC
February 28, 2022, 7:30（UTC）
We have completed the correction process as scheduled.
2022年3月1日5:00（JST）
予定通り修正作業を完了しました。
2 previous updates
Echo Server Down
Resolved Feb 22, 2022 at 12:08am UTC
Why this happened
We switched to a new server cluster during the Echo server maintenance conducted on February 20. We had prepared the servers based on the past load, but the load balancer that distributes requests to the servers could not withstand the load and could not accept some requests.
In this recovery work, we reverted to the old cluster.
How to prevent this in the future
We will enhance the load balancer's performance so that it can withstand the expected number of reque...
2 previous updates
Echo Server Maintenance
Resolved Feb 20, 2022 at 11:17pm UTC
Maintenance has been successfully completed.
February 20, 16:00 (UTC) - February 20, 17:00 (UTC)
Error might occur due to the instability of the server
Resolved Feb 17, 2022 at 12:05pm UTC
As a result of automatically increasing or decreasing the number of servers depending on the load, there were cases where reboots were triggered under certain conditions. When this happened, meetings were disconnected or people were forced to leave the space.
We have fixed the problem so that the reboot process will not run under certain conditions.
We apologize for the inconvenience caused over a long period of time.
負荷に応じて自動でサーバーの数を増減するように対応した結果、特定の条件下で再起動がかかってしまうケースがあり、そのときに会議が切断したり、スペー...
1 previous update
Echo server down
Resolved Feb 8, 2022 at 5:04am UTC
14:00 問題が解消しました。
The issue was resolved at 14:00.
1 previous update
SAML login issues
Resolved Dec 22, 2021 at 1:15am UTC
There was a configuration mistake in our web server.
We've identified the issue and provided the fix.
We're keeping an eye out on ongoing problems but they should be resolved shortly.
1 previous update
Some users cannot access the echo server.
Resolved Dec 21, 2021 at 6:59am UTC
Some users were experiencing the following problems for about 20 minutes.
・Unable to enter/exit the meeting room
・Pictograms are not updated.
・Unable to change the background
Difficult to access
Resolved Dec 17, 2021 at 1:53am UTC
There was a difficulty in accessing the site for about 10 minutes.
Realtime reflection is not working on all workspaces
Resolved Dec 1, 2021 at 9:41pm UTC
English Below
障害内容
16:38から21:41の間、リアルタイム処理を行なっているサーバーが高負荷により停止し、以下の機能が利用不可能となっておりました。
・会議室への入退出
・アイコンの右上の絵文字の変更
・ワークスペースのレイアウト変更
原因
リアルタイム処理を担っているサーバーの1台にアクセスが集中し、1つのサーバーが停止しました。その後ユーザから一斉に再接続のリクエストが走ったため、残りのサーバー群に対してもアクセスが集中し、リアルタイム処理を担っていたサーバーがすべて停止しました。
すぐに再起動を試みましたが、再接続のリクエストが短い時間間隔で送られてくることにより、再起動後すぐにサーバーが高負荷状態となってしまい、復旧に時間がかかっておりました。
対策
・一部のサーバーが停止しても、連鎖的に全てのサーバーがダウンすることを防ぐため、サーバーを増強しました。
・非効率な処理方法により、容易に高負荷を引き起こしやすい状態となっていたため、そのロジックを修正する予定です。