Швейцарская технологическая компания Proton столкнулась с отключением после отказа системы охлаждения в дата-центре во Франкфурте, Германия.
«Мы выявили критический отказ системы охлаждения в одном из наших дата-центров. Мы в процессе перенаправления трафика на резервные площадки», — сообщила компания в сети после полуночи по центральному времени сегодня (27 августа).
Сервисы Proton, включая ориентированный на конфиденциальность ProtonMail, были восстановлены примерно в 2 часа ночи по центральноевропейскому летнему времени.
Неясно, в каком именно объекте размещены сервисы Proton.
Основатель и генеральный директор Proton Энди Йен извинился за инцидент в сети, назвав его «беспрецедентным полным отказом системы охлаждения», который потребовал более длительного ручного восстановления.
Отметив, что реакция была медленной и выходила за рамки SLA компании, Йен признал: «Мы облажались и исправимся».
Позже он опубликовал график скачка температуры, который наблюдался в среде после отказа охлаждения.
«Действительно пугает, как быстро может подняться температура в высокомощном дата-центре при полном отказе охлаждения, — сказал он. — Базовый уровень — 30°C (86°F), а пик — 60°C (140°F). Подъем на 30°C примерно за 20 минут».
Относительно того, почему переключение на резерв (failover) заняло так много времени, Йен сказал, что это «заняло больше времени, чем обычно», поскольку дата-центр был «частично мертв», то есть автоматический failover не сработал, а сотрудники «изначально были заняты попытками восстановить охлаждение, прежде чем наши серверы будут окончательно повреждены».
Он добавил: «Этот конкретный тип отказа был нам известен, но меры по смягчению не были приоритетными, поскольку сценарий считался крайне маловероятным. Сейчас мы работаем над внедрением изменений, чтобы гарантировать, что такой инцидент не повторится».
Когда клиент в комментариях спросил, почему швейцарская компания использует дата-центр в Германии, Proton ответил: «У нас есть первоначальные дата-центры в Женеве и Цюрихе, которые все еще работают. Франкфурт — это дополнение, а не замена. Он нужен для пропускной способности, поскольку во Франкфурте находится крупнейшая в Европе точка обмена интернет-трафиком».
Ранее компания проводила опрос среди своего сообщества Reddit, чтобы выбрать новое место для дата-центра, и пользователи выбрали Германию. Компания запустила там работу около 2021 года в объекте, расположенном «рядом» с интернет-обменной точкой DE-CIX.
Еще один опрос, проведенный три года назад, показал, что сообщество выбрало Норвегию для еще одного нового местоположения, которое сейчас работает.
Однако на этой неделе Proton отметил, что: «Как швейцарская компания, Швейцария остается нашей правовой юрисдикцией, независимо от местоположения нашего дата-центра. А шифрование с нулевым доступом означает, что мы не можем читать ваши данные, где бы ни находились серверы».
Ранее Proton размещал свою инфраструктуру в бывшем военном бункере K7, расположенном в Швейцарии в Аттингхаузене под 1000 метров (3300 футов) гранита. Компания также ранее размещалась на площадке в Лозанне.
Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.
Автор – Dan Swinhoe
