Это фотоэкскурсия по московскому дата-центру DataSpace, в котором размещено наше оборудование.
Мы покажем вам системы безопасности дата-центра, серверные стойки и само оборудование.
Внимание - под катом много фотографий.
Мы в 1cloud предоставляем услуги по аренде виртуальной инфраструктуры с 2012 года.
Наш проект стартовал в Санкт-Петербурге, но со временем мы расширили географию.
Сегодня наше оборудование расположено в четырёх дата-центрах: Кселент , Пространство данных , Ахост И beCloud .
Первый находится в Санкт-Петербурге, второй — в Москве, третий — в Алма-Ате (Казахстан), четвёртый — в Минске (Беларусь).
Во всех этих дата-центрах установлено примерно одинаковое оборудование.
А потом мы расскажем, как он расположен в московском дата-центре.
Безопасность дата-центра
Начнем представление с внешнего периметра дата-центра DataSpace. Здание окружено пятиметровым мелкоячеистым забором с вращающимися шипами сверху и защитой от подрыва.Входы на территорию закрыты полноростовыми турникетами.
Рядом с ними посты охраны.
Чтобы пройти «через забор», необходимо предъявить бесконтактный ключ и пройти идентификацию на КПП.
Если сотрудник забыл свое удостоверение личности (паспорт), ему придется пойти домой, чтобы получить его.
Следующий «рубеж» — бронированные шлюзовые кабины в зоне приема посетителей.
В кабинках есть считыватели карт доступа и сканеры отпечатков пальцев.
Между стендами можно увидеть два знака уровня III. Dataspace — первый дата-центр в России, который прошел три этапа сертификации Tier III из Uptime Institute. 
На фото выше показан сканер сетчатки.
Они устанавливаются на входе во все помещения с ответственным оборудованием инженерной инфраструктуры процессингового центра.
Помимо сканеров доступ по-прежнему контролируется электронными ключами.
Также на всей территории дата-центра ведется видеонаблюдение.
По всему комплексу установлено более сотни видеокамер, записи с которых хранятся не менее пяти лет. 
В дата-центре предусмотрена возможность организовать выделенное защищенное пространство (клетку).
Наше оборудование размещается в штатных стойках DataSpace. Сдаем в аренду целые стойки.
У нас имеется большое количество оборудования, поэтому доступ к нему должны иметь только наши специалисты.
ЭПитание и охлаждение
Один из самых заметных нюансов в зале – заземление.Шина медь и подключен к внешнему контуру заземления .
В соответствии с требованиями центра обработки данных, заземленный все оборудование, которому для нормальной работы требуется отдельная линия заземления, в соответствии со стандартом ГОСТ 12.1.030-81. (система стандартов безопасности труда).
Работы по подключению оборудования к электросети и к шинам защитного заземления выполняются исключительно сотрудниками дата-центра.
Все провода маркированы.
Хаотичное распределение кабелей приводит к потере воздушного потока, что может привести к перегреву и выходу оборудования из строя.
Во избежание перегрева (и для соответствия требованиям корпоративных стандартов к качеству выполняемых работ) кабели DataSpace укладываются в специальные лотки.
В качестве бонуса эффективная прокладка кабелей помогает снизить энергопотребление систем кондиционирования.
В стандартной комплектации каждая стойка имеет два независимых защищенных канала питания.
Силовые кабели проложены под фальшполом, высота которого составляет 60 см.
Фальшпол можно трансформировать и менять расположение плит. Это дает возможность при необходимости переставлять стойки с оборудованием.
В компьютерных залах дата-центра организованы холодные коридоры.
От них оборудование получает воздух для охлаждения и выдувает его в сторону горячего коридора.
Холодный коридор отделен от горячего, чтобы избежать смешивания воздуха и, опять же, снизить затраты на кондиционирование.
Кстати, параметр энергоэффективности работы дата-центра DataSpace (этот параметр называется PUE) составляет 1,5. Он равен отношению общей мощности, потребляемой дата-центром, к мощности, потребляемой оборудованием в стойках.В дополнение к прокладке кабелей и холодным коридорам технология естественного охлаждения помогает DataSpace достичь такого уровня энергоэффективности.Для сравнения, средний коэффициент PUE в Европе составляет 1,8.
Зимой дата-центр отключает чиллеры и охлаждает компьютерные залы, используя холодный воздух с улицы.
Это может значительно сократить потери энергии и снизить счета за электроэнергию.
Стеллажи и оборудование
В дата-центре имеется двенадцать серверных помещений площадью 250 квадратных метров.метра каждый.
Они все одинаковые и расположены на втором, третьем и четвертом этажах.
В каждом зале примерно 88 стоек.
У каждого клиента дата-центра есть свои ключи от стоек с оборудованием.
У сотрудников DataSpace есть дубликат, поэтому, если вам нужно проделать простую операцию с оборудованием: заменить диск, переключить соединение, перенастроить оборудование, вам не придется отправлять своего специалиста.
Вы можете спросить об этом инженеров на месте — это нормальная практика и предоставляется в рамках поддержки клиентов дата-центра.
На фото ниже показан подъемный стол, на котором перемещаются серверы, коммутаторы и другое оборудование.
Без таких «тележек» никак — вес отдельных шасси с дисками может составлять десятки килограммов.
Если поступила большая партия железа, сотрудники дата-центра могут предоставить эти тележки (и другие рабочие инструменты) в пользование.
Далее покажем само железо .
Начнем с системы хранения данных NetApp E2860. Максимальное количество поддерживаемых дисков — 60 штук.
Пока занято 30 слотов — там стоят накопители на 8 терабайт. Есть у нас и более ранняя модель хранилища — NetApp E2760. 
Это достаточно медленные системы, поэтому их используют в качестве холодных хранилищ — там хранятся резервные копии.
На задней панели NetApp E2860 расположены контроллеры и блоки питания.
Еще одна из установленных СХД — NetApp FAS2554 с полкой расширения DS4246. Он содержит 24 диска SATA. Каждый из них имеет емкость 4 ТБ.
Это хранилище также зарезервировано для резервных копий и «медленных» хранилищ данных.
Cisco UCS FI 6296 - коммутаторы комплекса Cisco UCS. Это центральные устройства, отвечающие за подключение всех серверов в стойке к сетям 10GbE и Fibre Channel. Система имеет 48 фиксированных портов и слоты для трех модулей расширения, каждый из которых добавляет еще 16 портов Ethernet. При этом порты многофункциональны — поддерживают технологию FCoE (Fibre Channel over Ethernet).
Cisco UCS FI 6296 подключается к серверным стойкам Cisco UCS 5108 с блейд-серверами B200 M3, B200 M4 и B480 M5. В частности, модель B200 M3 имеет два 10-ядерных процессора Intel Xeon E5-2690 v2, а B200 M4 — два 20-ядерных процессора Intel Xeon E5-2698 v4. 
Здесь вы можете увидеть NetApp E2860, установленный в верхней части стойки, и две стойки Cisco UCS 5108 внизу.
Система хранения данных NetApp AFF300, специально оптимизированная для работы с SSD-накопителями.
Над ним расположена полка DS224C с двадцатью четырьмя SSD-накопителями по 7,6 ТБ.
В общей сложности система NetApp AFF300 может поддерживать до 30 ПБ дискового пространства на быстрых твердотельных машинах.Система управляется двумя 16-ядерными процессорами Intel Broadwell-DE. Их частота составляет 1,70 ГГц.
Каждый контроллер имеет четыре модуля оперативной памяти RDIMM ECC по 32 ГБ (всего 128 ГБ).
Под кэш отведено 120 ГБ, а остальные восемь — под энергонезависимую память NVRAM. 
На фото выше представлена система хранения данных NetApp FAS8040 с полками расширения DS2246. Это гибридные полки с дисками SAS емкостью 1,2 ТБ.
Массивы серии FAS8000 также оснащены многопроцессорными процессорами Intel и NVRAM. Они гарантируют уровень доступности системы не ниже 99,999%.
В этой системе хранения используются SSD-накопители, которые действуют как флэш-пул.
Вот как выглядят полки расширения NetApp FAS8040 и DS2246 сзади с соединительными проводами.
И, наконец, в наших стойках установлены кластерные коммутаторы NetApp CN1610. Они используются для объединения контроллеров FAS8040, FAS8080, AFF300 в единый кластер хранения данных (Clustered ONTAP).
На этом наш фототур по облаку 1cloud завершается.
Если у вас есть вопросы по структуре и архитектуре облака, вы можете написать нам на почту: [email protected] .
Наши специалисты помогут и проконсультируют.
Несколько постов из нашего корпоративного блога:
- Персональные данные: меры защиты
- Минимизация рисков: как не потерять свои данные
- Персональные данные: особенности публичного облака
-
Языковая Игра
19 Oct, 24 -
Пикаба Выиграл Open Web Awards
19 Oct, 24 -
Как Я Поймал Хакера 2
19 Oct, 24 -
Игра Историй
19 Oct, 24 -
Твиттер-Трафик
19 Oct, 24 -
Регрессия Гауссова Процесса С Самого Начала
19 Oct, 24
