January 21, 2022

Помните, Roblox в октябре лежал трое суток? Хочу высказать почет и уважение — они только что выложили полное описание того, как, от чего они упали, и как развивались события. Это один из самых подробных пост-мортемов, который я видел, вся проблема была в Consul, который использует BoltDB, не рассчитанный на подобное супер-интенсивное использование.

Если вы занимаетесь эксплуатацией сервисов, обязательно почитайте, невероятно поучительно.

blog.roblox.com/2022/01/roblox-return-to-service-10-28-10-31-2021/

Roblox Return to Service 10/28-10/31 2021 - Roblox Blog

Starting October 28th and fully resolving on October 31st, Roblox experienced a 73-hour outage. We’re sharing these technical details to give our community an understanding of the root cause of the problem, how we addressed it, and what we are doing to prevent similar issues from happening in the future.