Серверы И Дата-Центры В Нидерландах – Опыт Эксплуатации

Мы в ХОСТКЕЙ Мы обслуживаем более 400 собственных серверов в DC Serverius, который расположен посреди красивых полей в Нидерландах, в городе Дронден — чуть севернее Амстердама.

Хочу поделиться своими впечатлениями и межкультурными различиями из более чем 2-х летнего опыта размещения наших серверов в Сервериусе, как не наступить на грабли.

Вся история началась около 3 лет назад, когда мы решили открыть сайт в Нидерландах.

Мы посетили десяток дата-центров в Амстердаме, Роттердаме и окрестностях.

Провёл переговоры, собрал предложения и договоры.

Всех их можно разделить на две категории:

  • «крутые дата-центры»/теледома от 10 000 м2 с охраной, парковкой и всем прочим с ценой за стойку около 2000 евро и массой ограничений.

    Общаетесь с менеджером, все красиво, но в договоре полно засад - об этом расскажу позже.

  • «обычные дата-центры» под хостинг, стоек на 100-200 — в районе, на бывшем складе или бывшей АТС или что-то вроде ангара.

    Цена за стойку около 1000 с электричеством - ну как договоритесь.

    Договор тоже не простой, но вы общаетесь с собственником.

  • Дата-центры крупных хостеров - как правило, ищут реселлеров, партия реселлера в Голландии сложная - наценка 5-20 евро за машину, обязанность заказывать 10-20 серверов в месяц, чтобы иметь хорошую скидка.

    Мы это не рассматривали.

На этом разница заканчивается – технологические решения практически одинаковы.

В Москве я видел эти технологические решения только в самых крутых местных дата-центрах.

Все идеально, оптимизировано, чтобы его нельзя было трогать, чтобы работать без вмешательства человека.

Полностью автоматический.

Тотальный аутсорсинг.

В общем из 5-6 реальных предложений мы тогда выбрали Сервериус и не пожалел об этом.

За весь период нашей работы у нас не было ни одного ДТП по их вине.



Нет ничего дороже персонала

Как правило, весь штат дата-центра на 100-200 стоек состоит из 5 человек: владельца, он же главного инженера и продавца; начальник финансов; руководитель службы технической поддержки; пара младших инженеров ему в помощь.

Зарплаты высокие, налоги высокие – сотрудников мало.

Все, что можно вывезти, отдается на аутсорсинг.

Все работают добросовестно (20% безработицы и ипотека творят чудеса).

Следствие: нет круглосуточной смены, как здесь все привыкли.

Надо привыкнуть к тому, что голландцы приходят на работу ровно в 9 по своему времени и уходят ровно в 18. Сверхурочная работа стоит 150 евро в час, за эту сумму хозяин сам сядет на свой велосипед и приедет посмотреть, что случилось с вашим сервером.

Мы никогда не использовали его.

Надо отдать должное тому, что если они начали дело, то они его закончат. В Германии болгарский инженер может выехать в 18-00, оставив корпус на середине и сервер в разобранном виде.

Следствие: Никто никуда не пойдет менять диски, покупать память и т.д. Все это должен делать ваш поставщик.

Все вопросы решаются только через KPN/DHL, а в дата-центр приезжает курьер.

Мораль: все сервера должны быть оснащены модулями удаленного доступа.

Все диски должны быть серверного класса.

Все должно быть на гарантии.



Никакой спешки

Мы здесь, в Москве, привыкли к тому, что планирование — дело практически бессмысленное, и торопимся решать вопросы.

Мы никому не доверяем, каждый день забираем товар со склада.

В Голландии такого нет. Если вы что-то заказываете, поставщик честно говорит, что через неделю будет готово.

И ровно через неделю+1 день он прибывает в дата-центр.

Никто ничего не держит на складе.

Все сборщики заказывают у дистрибьюторов, это привозят почтой из разных мест и потом тоже собирают и отправляют почтой.

Так принято и так все работают. Никто просто не поймет тему «Мне нужен сервер завтра или сегодня».

Вы заказываете, вам называют срок, и все приходит в этот срок.

Не забывайте – если что-то сломается по гарантии, вызывается курьер и деталь отправляется поставщику.

Например, если сервер перестает отвечать на IPMI, поставщику отправляется весь сервер.

Диски накапливаются до тех пор, пока в коробке их не будет достаточно, и также отправляются поставщику.

Через месяц приходит такая же коробка с запасными дисками.

В дата-центре действует SLA – платное.

Поскольку дата-центр не монстр, а вы не самый маленький клиент, ваши запросы будут обслуживаться быстрее.

Оно должно быть сформулировано точно.



Никаких искусственных формальностей

Камнем преткновения при использовании региональных дата-центров в РФ стала невозможность отправки серверов в дата-центр без собственного инженера-экспедитора, что сводило на нет весь экономический эффект от цены.

В Сервериус наш поставщик просто отправляет серверы почтой с пометкой HOSTKEY, дата-центр их принимает, настраивает IPMI, монтирует в стойки и подключает серверы к сети.

Точно так же перенастраивают серверы, присылают запчасти по гарантии и т. д. Вся работа, которую можно выполнить за 15 минут, считается мелкой и отдельно не оплачивается.

Для них нет проблем переносить память, заменять диски, переносить машины между стойками.

Очень важно – никаких поблажек не будет, опишите все в договоре.

Контракт – это закон.



Цена за стойку

В РФ привыкли к формуле 42U и 5 кВт. В Голландии в стоимость стоек 42U обычно входит немного электроэнергии, около 1,5 кВт. Базовая цена составляет около 400-500 евро, а превышение стоит 15 евроцентов.

Полная стойка стоит около 1000 евро.

Вывод прост – установите экономичное оборудование и платите меньше.

Выключите серверы, ожидающие клиента.

Самое невыгодное, что вы можете сделать, — это оставить старые сервера; их эксплуатация будет стоить значительно дороже.

Читайте договоры очень внимательно - в Голландии и Германии, если вы заказали что-то на год, вам придется заплатить за это ровно за год, независимо от того, использовали вы это или нет .

Досрочно отказаться от стенда не получится, но иногда нужно предупредить за 3 месяца.

Так что это принято.

Есть еще пятилетние контракты – внимательно смотрите на срок, на который подписываете.

Тогда не спрыгивай.



Интернет

Обычно дата-центр предоставляет собственный интернет, уже доставленный на площадку.

Остерегайтесь и бегите, если это не так – затраты на установку и долгосрочные контракты сделают эту идею туманной.

У нас цена гарантированного интернета около 800 евро за гигабит пропускной способности.

Опять же внимательно читайте договоры - у нас в РФ принято, что превышение обычно пропорционально обязательному потреблению, т.е.

если гигабит покупается за $2000, то превышение обойдется в $2 или меньше.

В Голландии франшиза может составлять 50-70 евро/мегабит. вам придется увеличить гарантированное потребление! И быстро сократить его не получится, договор годовой.

В остальном все традиционно, зарядка 95% разрывная - сбрасываются 5% значений максимальной нагрузки в месяц.

Сам дата-центр не управляет Интернетом — как правило, это передается профессионалам.

Дата-центр не может себе позволить содержать несколько суперсетевых специалистов; это делают офисы, которые их нанимают. Часто есть «рекомендуемый» провайдер.

Цена на темную оптику такова, что проложить маршрут до AMS-IX самостоятельно становится выгодно только после 10G полосы в этом направлении.

При этом от расстояния мало что зависит – маршрут внутри Амстердама и маршрут Амстердам-ЦОД в регионе будут стоить практически одинаково.



Что мы используем в повседневной работе?

Судя по опыту, серверы Supermicro показали себя с лучшей стороны.

Срок доставки 7-10 дней, гарантия на все 3 года.

Берем однопроцессорные в составе Микрооблака на 8-12 блейдов.

Процессоры E3-1230v2, WDC RE4 500Гб 7200 об/мин, накопители 2Тб 7200 об/мин.

Все машины с модулем дистанционного управления.

10 микрооблачных систем в такой конфигурации потребляют около 4-5 кВт, это 80 серверов.



Серверы и дата-центры в Нидерландах – опыт эксплуатации



Серверы и дата-центры в Нидерландах – опыт эксплуатации



Серверы и дата-центры в Нидерландах – опыт эксплуатации

Заказываем более крупные машины из стандартных корпусов 1U, напичканные последними моделями E5-2630 и прочим.

Поскольку мы ничего не перепродаем, мы можем заказать у поставщика все, что захотим, в свежем виде.

Мы стараемся придерживаться следующих популярных позиций для старых серверов: Процессоры E5-2630, 6 ядер 2,3 ГГц, E5-2670 8 ядер, 2,6 ГГц Память - всего 16Gb DDRIII ECC REG LV DIMM от Kingston, ни одного гарантийного случая Материнки - Supermicro X9DRD, 2xs2011, 16xDDRIII (256Гб ОЗУ) Контроллеры: LSI Megaraid 9260-4i, Megaraid 9260-8i, HBA 9211-8i. Диски: SATA WDC RE4 500Гб, 3Тб.

SAS – 300 ГБ 15 КБ, 600 ГБ 15 КБ, 2 ТБ 7,2 КБ – Seagate/Hitachi Корпуса Supermicro на 4, 12 и 36 слотов для 3,5-дюймовых накопителей.

SSD серверного класса: Samsung 940 Pro, Intel 520 объёмом 128 и 256Гб.

Вы также можете заказать более крутые модели.

Всего 15 статей - все взаимозаменяемые.

Самое крутое, что они у нас заказали, это HBA-система 2xE5-2630/384Gb/36x300Gb SAS 15K/5xLSI 9211-8i. В качестве гарнира есть всякие Cisco - от простых коммутаторов для VLAN до ASA5530 со всеми наворотами.

Цена покупки в три раза ниже, чем в РФ.



Сеть



Серверы и дата-центры в Нидерландах – опыт эксплуатации

Мы подключены через два интерфейса 10G с помощью наших современных маршрутизаторов Brocade CER-2024. Это позволяет нам не замечать редкие DDOS-атаки, которые остались незамеченными вышестоящими системами мониторинга.

Внутри вся сеть сделана на Cisco Catalyst 1000/100Мбит/с.

Все управляется и контролируется централизованно.



Почему такая цена

Все очень просто - поставщики дают нам рассрочку на серверы, равными частями на 2 или 3 года без предоплаты.

Для этого мы тщательно управляем белой голландской компанией, имеем кредитную историю и играем в белую игру.

Добавляем затраты на дата-центр, интернет, маржу и получаем цену, сравнимую с Hetzner или другими игроками.

В отличие от известных дискаунтеров, ХОСТКЕЙ сможет собрать любой необходимый конфиг из описанных выше частей и обслуживать его в лучшем виде.

Любые кластеры, системы виртуализации, системы хранения данных — все что угодно, включая колокейшн ваших клиентских серверов.

Такой подход позволяет обойтись одним человеком в Амстердаме, который занимается финансами и взаимодействием с поставщиками.

Все остальное, что касается технологии, мы решаем через московский офис с помощью дежурной смены и одного старшего инженера, отвечающего за голландскую площадку.

Это отлаженные бизнес-процессы, отполированные до блеска.

Надеюсь, что этот пост покажется кому-то полезным, достойным добавления в избранное и убережет от ошибок.

Автор – директор и совладелец Хосткей.

ру Теги: #аренда серверов #hostkey #хостинг серверов #нидерланды #Serverius

Вместе с данным постом часто просматривают:

Автор Статьи


Зарегистрирован: 2019-12-10 15:07:06
Баллов опыта: 0
Всего постов на сайте: 0
Всего комментарий на сайте: 0
Dima Manisha

Dima Manisha

Эксперт Wmlog. Профессиональный веб-мастер, SEO-специалист, дизайнер, маркетолог и интернет-предприниматель.