Власть огня или как горит информация
Вы целый день провели за стройкой хижины, следили за здоровьем, охотились, отбивались от врагов, а потом — бац, и ничего этого не было. Вас откатило назад в момент последнего сохранения, и вы потеряли все достижения и наработки. А все из-за пожара в дата-центре где-то во Франции. Да, ситуация неприятная, но этого всего лишь онлайн-игра Rust, в которой даже победить нельзя. А тем временем из-за того же пожара у других людей страдает бизнес или дело всей их жизни, которое они ведут в реальности. К счастью, сами пожары в ЦОД обходятся без жертв, ввиду того, что там не нужно постоянное человеческое присутствие. Но инциденты такого рода, происходящие в результате неосмотрительности или по иным причинам, обходятся очень дорого, что может стоить чьей-то жизни. По данным Gartner, простой, связанный с обработкой данных в ЦОД, обходится среднестатистической компании в 300 000 долларов ежечасно (5 600 долларов в минуту). Это не считая репутационного ущерба. Несмотря на меры предосторожности и современные системы пожаробезопасности, ЧП происходят и компании терпят лишние расходы, а потребители теряют личные данные. Благо, если заранее были сделаны резервные копии (!), но как показывает опыт с OVHcloud, такое делают не всегда. А пожары случаются везде.
BT Group (Великобритания)
В конце июня 2015 года сильный пожар в помещении с телекоммуникационным оборудованием внутри дата-центра одного из крупнейших британских операторов BT Group вывел весь ЦОД из строя и оставил без доступа к связи и интернету многочисленных клиентов компании, включая государственные учреждения.
Пострадавший ЦОД находится в Белфасте (Северная Ирландия, Великобритания). Сообщения о пожаре внутри него поступили в 6 утра по местному времени. Огонь был быстро потушен. Электроснабжение ЦОД было восстановлено практически сразу же после полудня. Тем не менее, инженерам пришлось работать до утра следующего дня, чтобы вернуть своим системам работоспособность и полностью вывести их в нормальный режим.
Среди других пострадавших партнеров BT Group, арендующих часть помещений внутри ЦОД, значатся следующие компании и организации: Tibus (сервис-провайдер) и Translink (занимается общественным транспортом), Городской совет Белфаста, Northern Ireland Electricity (энергетическая компания).
Сообщается, что после экстренного возобновления электроснабжения были повреждены блоки распределения питания (PDU), отвечающие за электроснабжение IT-оборудования части партнеров владельца ЦОД, арендующих площадки для размещения серверов.
Samsung
Даже такие крупные компании не застрахованы от даунтаймов из-за пожаров в одном ЦОДе. В апреле 2014 года в городе Квачхон (Южная Корея), произошел пожар в здании, в котором располагается дата-центр компании Samsung, в результате чего стал недоступен официальный сайт компании, а так же перестали работать некоторые службы в фирменных смартфонах и Smart TV. Во время инцидента никто не пострадал, а все службы были восстановлены буквально за несколько часов.
Азербайджан
В ноябре 2015 года почти все население Азербайджана лишилось доступа к Интернету. В одном из дата-центров компании Delta Telecom вспыхнул огонь. Даунтайм длился в течение восьми часов. После этого инцидента получить доступ к интернет-услугам можно было лишь с использованием каналов местных мобильных операторов Backcell и Azerfon.
Причиной отключения стал пожар в Баку на серверной ферме Delta Telecom. Согласно официальному заявлению представителей этой компании, загорелись несколько кабелей в старом ЦОД. К процессу ликвидации возгорания были привлечены пожарные и аварийные службы. Из-за происшествия оказалась практически парализована работа банков — не проводились операции, была остановлена работа банкоматов и платежных терминалов. Во многих регионах оказалась недоступна мобильная связь. Столь крупная авария, связанная с интернетом, произошла в Азербайджане впервые. На устранение ее последствий понадобилось 5 часов. Обслуживание пользователей было восстановлено только ближе к полуночи по местному времени.
По данным компании Renesys, которая занимается отслеживанием подключений к Интернету, 78% сетей Азербайджана ушли в даунтайм, что по количеству составляет 600 сетей. Данные сети использовали ключевое соединение Delta Telecom и Telecom Italia Sparkle.
Макомб, Мичиган
В апреле 2013 года ИТ-службы округа Макомб, штат Мичиган, перестали работать после того, как пожар повредил здание, в котором находится центр обработки данных округа. В округе Макомб, который находится к западу от Детройта и насчитывает 850 000 жителей, не было резервного центра обработки данных.
На следующий день после пожара глава округа Марк Хакель объявил чрезвычайное положение, заявив, что здание будет закрыто на несколько месяцев и потребует ремонта и модернизации на миллионы долларов.
В результате пожара сотрудники округа остались без Интернета и связи. «Мы просим общественность проявить к нам терпение, пока мы оцениваем ущерб, нанесенный нашим ИТ, Интернету и телефонным системам, чтобы определить степень ущерба», — говорилось в сообщении округа на своем веб-сайте.
Отключение в округе Макомб является примером инцидентов, которые подчеркнули уязвимость местных органов власти, которые часто имеют ЦОД в старых зданиях (1930-г.) и не поддерживают адекватные планы резервного копирования и аварийного восстановления.
Калгари, Канада
В июле 2012 года в Калгари произошел пожар в ЦОДе города, в результате которого городские службы были повреждены, а в местных больницах были отложены сотни операций. Взрыв и пожар, произошедший на объекте Shaw Communications, вывели из строя как основную, так и резервную системы, которые поддерживали ключевые государственные службы для местных органов власти и медицинских учреждений.
В штаб-квартире Shaw взорвался трансформатор, из-за чего на 36-часов вышли из строя 311 аварийных служб города, а также базы данных об имуществе и транспортных средствах Альберты, которые обслуживались в центре обработки данных IBM в здании Shaw. Из-за отключения также была отключена медицинская компьютерная сеть Alberta Health Services, что вынудило отложить сотни плановых хирургических процедур. Служба была восстановлена поздно вечером в пятницу, но служба сообщила, что потребуется некоторое время, чтобы справиться с невыполненными процедурами.
IBM Canada, которая предоставляет множество услуг для провинции Альберта, по сообщениям, была вынуждена доставить резервные ленты с данными о транспортных средствах и регистрации собственности в резервное хранилище в Маркхэме, Онтарио.
И снова Канада
Иногда, чтобы вывести из строя работу серверов, не надо даже огня, достаточно простого задымления. В августе 2016 года из-за задымления в дата-центре канадской государственной организации Shared Services Canada, которая отвечает за обслуживание правительственной IT-инфраструктуры, несколько ведомств оказались не в состоянии предоставлять услуги гражданам североамериканского государства в нормальном режиме.
Инцидент произошел в дата-центре, расположенном в Оттаве. Инженеры Shared Services Canada отмечают, что никакого огня не было, но из-за задымления им пришлось пойти на завершение работы серверных систем в аварийном режиме. Источник дыма также пока не был установлен. Инженеры уже начали расследование, чтобы определить причину появления проблемы и убедиться, что она не повторится.
Этот инцидент вызвал массовое отключение правительственных веб-сайтов и системы начисления заработной платы. Кроме того, в офлайн ушел сервер внутренней электронной почты для государственных служащих.
По данным информагентства The Canadian Press, около 50 тыс. работников предприятий из сферы общественных услуг оказались не в состоянии получать и отправлять сообщения по электронной почте в течение дня. Даунтаймом было затронуто помимо прочего Министерство транспорта Канады.
Подводя итог, просто хочется в очередной раз предостеречь людей: во-первых, делайте бэкапы, а во-вторых, следуйте инструкциям безопасности. Берегите себя и будьте осторожны!
На правах рекламы
Мы не экономим на оборудовании и дата-центрах! VDSina размещает эпичные серверы в одном из самых современных и надёжных российских дата-центров — DataPro, который имеет сертификат соответствия TIER IV.
Все помещения оборудованы системой сверхраннего обнаружения дыма (VESDA), полностью автоматизированной системой пожарной сигнализации и системой автоматического газового пожаротушения, которая располагается под фальшполом и над фальшпотолком.
