Великолепный век от PQ.Hosting: как арест в миллион долларов изменил жизнь команды
Привет, друзья! Обычно мы здесь рассказываем про разные self-hosted сервисы и делимся полезными инструментами, которые делают вашу работу проще. Но сегодня у нас совершенно другая история — масштабная, эмоциональная и про настоящее испытание.
Совсем недавно компания PQ.Hosting столкнулась с форс-мажором, который поставил под угрозу работу наших серверов в Турции. Это был момент, когда всё висело на волоске. Часть нашей команды экстренно вылетела в Стамбул, бросив все дела. Ребята работали не просто часами — сутками, практически без сна, чтобы спасти проекты и бизнес наших клиентов. И это не просто слова: мы сделали всё, чтобы ваши сайты, сервисы и данные остались в безопасности.
Хотя, наверное, мы немного забежали вперёд… Давайте расскажем обо всём по порядку и погрузим вас в детали того, что же произошло с нашим оборудованием в турецком дата-центре. Это история про вызовы, риски, невероятную самоотдачу и веру в то, что наши клиенты заслуживают только лучшего!
Особенности национального турецкого рынка хостинга
С турецким рынком нас связывает долгая, полная вызовов история. Мы вышли на него задолго до того, как это стало модно: сейчас многие российские хостеры обжились в стамбульских дата-центрах, а мы были чуть ли не первопроходцами — успели до хайпа! Это был смелый шаг, но, как оказалось, далеко не простой.
За «непаханностью» турецкого рынка скрывались свои суровые реалии. Главная из них — это адская проблема с ввозом оборудования. Никто не дает гарантий, а любая попытка ввоза превращается в лотерею.
И у нас всё было именно так. Мы пытались зайти через брокеров, но в итоге смогли растаможить… только диски. Всё остальное застряло в бесконечном лимбе турецкой бюрократии. Брокеры, конечно, предлагали варианты за крупные суммы за свои услуги, но честно предупреждали: результат всё равно непредсказуем.
В конце концов, решение пришло само собой, но тоже не без боли: мы начали закупать оборудование на местном рынке. И тут нас ждал новый удар — цены! Они оказались в 2–3 раза выше, чем в Европе. Да, в Турции есть аналоги eBay, но они, к сожалению, переполнены скамом. Проверяй, перепроверяй, а потом ещё раз — и всё равно можешь нарваться на мошенников.
Каждая проблема становилась для нас проверкой на прочность, но мы продолжали бороться, потому что знали: за этим всем стоят проекты наших клиентов. Мы не могли позволить себе отступить.
Первые шаги в Турции и первый переезд
Итак, с оборудованием мы разобрались, хоть и заплатили за это немалую цену. В прямом смысле. Первым нашим домом в Турции стал Измир — потрясающе красивый, древний город на берегу Эгейского моря. Если вы когда-нибудь видели его закаты, то понимаете, почему мы выбрали это место. Но для нас это был не романтический выбор, а жесткий компромисс.
Наше новое пристанище мы нашли через знакомого, который свел нас с директором местного дата-центра. Этот человек стал для нас спасением: помог не только найти подходящее место, но и закупиться оборудованием прямо на месте. Это обошлось дешевле, чем другие варианты, но цены всё равно были ощутимо выше, чем в Европе. Турция, что тут скажешь.
Мы проработали в этом ДЦ около полутора лет, и первое время всё казалось почти идеальным. Доступ к электроэнергии был дешевым, да и сам Измир радовал своим комфортом. Но за внешним спокойствием скрывалась одна огромная проблема, которая постепенно съедала наш бюджет. Цены на интернет здесь были просто космическими: 40 Гбит обходились в $20 000. И это без учёта стоимости защиты от DDoS-атак, о которой мы предпочитаем даже не вспоминать.
Мы поняли, что так долго не протянем. Поэтому начали искать новое место, и наш выбор пал на Стамбул — город, который кипит жизнью и возможностями. В стамбульском ДЦ Comnet нам предложили действительно выгодные условия. Так, например, нам помогли с покупкой оборудования. Но главной фишкой был доступ к 10 Gbps портам, что стало настоящим прорывом.
Кстати, этот ДЦ нам посоветовал наш клиент-хостер. Это вообще очень распространенная история — во многих странах у нас есть компании, которые берут в аренду наши серверы под свои ноды, базы данных, удаленных доступов и других задач.
Это удобно и для нас, потому что мы получаем стабильного клиента, который покупает много и сразу. Ну клиентам, конечно же: им не нужно самим заморачиваться с покупкой оборудования. К тому же, для них доступны самые разные конфигурации железок — не только те, которые есть у нас на сайте. Поэтому если вы хостер или только хотите им стать, то обращайтесь — все устроим в лучшем виде. Но это так — на правах рекламы. Теперь возвращаемся к нашей истории!
В стамбульском Comnet всё работало просто идеально. Высокая скорость, стабильность, никаких сбоев. Клиенты были довольны, а мы наслаждались тем, что нашли баланс между качеством и ценой. Но, как это часто бывает, именно в момент спокойствия судьба решила проверить нас на прочность.
В ночь на понедельник, 20 января, в 01:21, всё пошло наперекосяк. И события этой ночи стали для нас настоящим испытанием на выживание.
Арест и экстренные меры
Всё началось с того, что в 01:21 ночи мы получили сообщение от их технического директора. Это был момент, который мы не забудем никогда. Сообщение было коротким и тревожным: «Comnet лишили лицензии, имущество компании арестуют. Всё оборудование под угрозой конфискации».
Мир вокруг будто бы замер, а мозг начал лихорадочно искал решение. Мы понимали: если мы промедлим хоть немного, тысячи наших клиентов по всему миру останутся без доступа к своим сайтам, проектам, бизнесу. Это не просто технический сбой — это полный крах для многих.
Позже мы узнали, что у Comnet накопился долг перед одним из крупнейших турецких интернет-провайдеров на сумму 1 200 000 долларов. Аресты проходили пока только в Турции. Однако, по данным некоторых источников, ожидаются также аресты на объектах компании и по всему миру. Мы оказались в центре урагана, где всё рушилось вокруг, а время работало против нас.
Но пугаться не было времени. Уже через несколько минут после сообщения мы начали искать выход. Главная задача: найти новый дата-центр уровня Tier III в пределах Стамбула, чтобы успеть перевезти оборудование максимально быстро.
Критерии были жесткими. Это должен был быть надёжный ДЦ, готовый принять нас немедленно, с возможностью развернуть всё оборудование без задержек. Секунды превращались в часы. Мы перебирали варианты один за другим, отсеивали неподходящие, пока, наконец, ближе к утру не нашли подходящее место.
Цены в новом ДЦ оказались в 2,5 раза выше, чем в Comnet. Да, это был удар по бюджету, но разве могли мы думать о деньгах, когда на кону была репутация и доверие наших клиентов? В такие моменты всё становится предельно ясно: они не должны страдать. Ни скорость, ни качество наших услуг не могут быть поставлены под угрозу.
Единственная хорошая новость была в том, что во всех дата-центрах мы используем только свое оборудование и ничего из железок не арендуем у дата-центров. В таких форс-мажорных ситуациях это очень удобно: ты можешь просто взять, все упаковать и перенести на другую локацию. А если бы мы арендовали серверы, то они бы тоже остались под арестом.
С этого момента началась настоящая гонка на выживание. Работа закипела: наша команда, сотрудники нового ДЦ, техники на местах — все включились в процесс с максимальной самоотдачей.
Мы работали 10 часов подряд без сна, без остановки. Каждый сервер, каждый кабель, каждая стойка были разобраны, перевезены и установлены заново. Мы знали: любой простой, любая ошибка может стать критической.
Почему важно было все сделать ночью? Потому что мы думали о наших клиентах. Мы понимали: для большинства из них это рабочие дни, и любой сбой может выбить их из колеи. Ночь была нашим единственным шансом минимизировать неудобства.
И вот картина, которая останется в нашей памяти надолго: наша команда с красными от усталости глазами, и стойки, которые нужно разобрать и собрать, словно огромные пазлы. В такие моменты понимаешь, что настоящая сила — это не только технологии, но и люди, которые верят в то, что делают.
К 9 утра по стамбульскому времени всё оборудование было перевезено, установлено и подключено. Серверы снова были онлайн, а мы наконец смогли выдохнуть. Вернув прежнюю скорость и качество обслуживания, мы сохранили то, что для нас самое важное — доверие клиентов.
Кстати, Турция — единственная страна, где мы переезжаем уже в 3 ДЦ. Ни в одной другой локации подобного нет.
Это было одно из самых сложных испытаний, через которые мы проходили, но мы справились. Мы доказали себе и всем, кто нам доверяет, что готовы бороться до последнего.
Итоги
И вот мы сидели на рассвете, измученные, измотанные, но с огромным чувством облегчения. Солнце медленно вставало над горизонтом Стамбула, окрашивая город в золотой свет, и казалось, что этот рассвет принадлежал не только этому дню, но и нашей победе. Серверы снова были онлайн, клиенты даже не заметили, через что мы прошли.
Эта ночь изменила нас. Она стала напоминанием о том, что наша работа — это не просто цифры и железо. Это, прежде всего, ответственность за судьбы тысяч людей, которые на нас полагаются. И если для этого нужно работать 10 часов подряд без сна, лететь в другую страну или собирать стойки в последний момент, мы сделаем это снова. Потому что для нас нет ничего важнее вашего доверия.
Этот рассвет в Стамбуле стал для нас символом. Символом того, что никакие трудности не остановят команду, которая готова бороться до последнего. Мы сделали это для вас. И будем делать это снова и снова, потому что вы заслуживаете только лучшего.
Спасибо, что верите в нас. Спасибо, что доверяете нам свое будущее.