Весной 2013 года компания «Техносерв» совместно с компанией НР внедрила собственную разработку – модульный ЦОД «ИТ Экипаж» — в качестве резервного ЦОДа в компании «Аэрофлот». Этот проект стал одним из первых реальных внедрений модульных ЦОДов в России, поэтому мы решили рассказать о нем более подробно. Вот интервью экспертов компаний — авторов проекта – Алексея Зарубина, руководителя направления по работе с предприятиями Аэрокосмической отрасли НР, и Александра Переведенцева, главного специалиста отдела разработки новых решений компании «Техносерв».
— Какова сейчас ситуация на рынке ЦОДостроения? Какие требования особенно интересуют заказчиков?
Александр Переведенцев:
— Заказчики хотят, чтобы им построили ЦОД в максимально короткие сроки; естественно, стоимость ЦОДа должна быть адекватна поставленной задаче, и ЦОД должен окупиться за реальное время. Если говорить о сегодняшних проблемах, с которыми сталкивается заказчик на первых этапах проекта, это прежде всего поиск приемлемого здания для развертывания ЦОД, дефицит электроэнергии, особенно в густонаселенных районах. Именно поэтому ЦОД должен быть энергоэффективным. А также остро стоит проблема поиска высококвалифицированных специалистов для последующего обслуживания ЦОД.
Что касается инженерии, актуальные мощностные характеристики на сегодняшний день – 15—20 кВт на одну серверную стойку. Основными трендами в ЦОДостроении являются отказоустойчивость инженерных систем, которую чаще всего оценивают по метрикам Uptime Institute – Tier II, III, IV, и, безусловно, энергоэффективность.
Алексей Зарубин:
— Мы сотрудничаем с «Аэрофлотом» уже давно, в частности в плане поддержки их основного ЦОДа и приложений для работы в нем. Вполне обоснованно компания НР называет себя стратегическим советником «Аэрофлота» в области ИТ. В рамках этой стратегии мы стали формировать инфраструктуру основного ЦОДа «Аэрофлота» и убеждать руководство компании в необходимости постройки резервного ЦОДа. Весной этого года проект резервного ЦОДа был реализован совместно с коллегами из компании «Техносерв», причем ими и был разработан этот ЦОД.
Говоря о тенденциях развития ЦОДов, стоит отметить, что в большинстве крупных мировых авиакомпаний есть собственные ЦОДы, это связано со спецификой их деятельности: им необходим высокий уровень доступности приложений, поскольку высока ответственность за их работоспособность. Многое регулируется государственными требованиями и международными авиационными нормами. «Аэрофлот» — не исключение, у них есть собственный ЦОД. Работа приложений настолько важна, что наличие резервного ЦОДа просто необходимо.
— Почему компания «Техносерв», крупнейший российский системный интегратор, решила заняться разработкой собственных решений для ЦОД? По каким критериям было выбрано направление модульных ЦОДов? Каковы перспективы этого рынка в России?
Александр Переведенцев:
— Еще лет шесть-семь назад мы занимались внедрением мобильного решения Black Box от компании SUN. В процессе работы с этим решением мы поняли, что такое решение, как класс, может быть очень интересно для российского рынка. Позднее мы начали производство собственных модульных ЦОДов, но, как правило, это были индивидуальные решения, под каждого заказчика. В конце концов пришли к выводу, что необходимо создать собственное тиражируемое решение. Так появился наш модульный ЦОД «ИТ Экипаж» — готовый продукт с реализацией под ключ.
Перспективы у решения очень хорошие. Поставив минимальную комплектацию, например всего один или два модуля, мы можем развивать его, наращивая мощность. «Аэрофлот» уже оценил «ИТ Экипаж»: решение универсально, подходит многим компаниям из любых других отраслей экономики, для которых ИКТ — важная часть функционирования бизнеса. Именно перспективность этого решения, наверное, и помогла нашему совместному проекту для «Аэрофлота» получить престижную ИТ-премию CNews AWARDS в номинации «Высокотехнологичный ЦОД года».
Стоит отметить, что рынок модульных ЦОДов набирает обороты во всем мире. По этой модели строит свои новые ЦОДы компания Google, в России так работает «ВымпелКом». Особенность модульных ЦОДов в том, что они собираются и тестируются на месте производства, а потом на площадке клиента выполняется только монтаж, что резко сокращает время внедрения. Важен и такой параметр, как мобильность: если требуется оперативно переместить вычислительные ресурсы в другое место, то модульный ЦОД дает такую возможность.
— Расскажите, пожалуйста, какие решения и продукты НР используются в составе модулей для мобильного ЦОДа?
Алексей Зарубин:
— Используется все оборудование, необходимое для построения инфраструктуры предприятия. Это серверное оборудование, системы хранения данных и все необходимое ПО для решения задач резервирования и копирования, а также управления всей инфраструктурой.
Компания НР выступила поставщиком программно-аппаратного комплекса для создания ЦОДа, который был построен в сжатые сроки благодаря программе НР предоставления услуг по лизингу. Консолидированное хранилище данных в резервном ЦОДе «Аэрофлота» организовано с помощью дисковых массивов HP P9500 XP, разработанных под потребности заказчиков, для которых простой системы недопустим даже при проведении профилактических работ. Доступность систем XP P9500 с полным дублированием аппаратного обеспечения составляет не менее 99,9999%. Все компоненты могут быть заменены без остановки работы, все операции по обновлению микрокода не требуют прекращения доступа к данным. Процессорные блейды устанавливаются парами, и в случае остановки одного из них рабочая нагрузка переходит на второй. В качестве серверов используются серверы НР последнего поколения G8 в самых мощных конфигурациях, объединенные в «пулы», чтобы было удобно и быстро выделять необходимые ресурсы для тех или иных подразделений «Аэрофлота».
Важно подчеркнуть, что внедрение модульных ЦОДов полностью соответствует концепции конвергентной инфраструктуры НР, которую компания продвигает уже несколько лет. В резервном ЦОД «Аэрофлота» создана полностью конвергентная инфраструктура, которая позволяет оптимально управлять собственными мощностями, быстро перенастраивать идущие процессы и экономить время администраторов и другие ресурсы.
— Где производятся составные элементы «ИТ Экипажа»?
Александр Переведенцев:
— Производителей более двух десятков, все продукты подобраны в соответствии с конкретными требованиями физических и технологических параметров модуля и работают в едином согласованном режиме.
— Какова максимальная мощность модульного ЦОДа?
Александр Переведенцев:
— Вероятно, вопрос относится к параметрам одного модуля. В одном модуле максимально размещается 18 стоек. Мы можем обеспечить пользователям от 10 до 30 кВт электрической мощности на стойку в зависимости от требований. Так что максимальная полезная нагрузка одного модуля может достигать 500 кВт, а поскольку решение практически неограниченно масштабируется, то соответственно растет и мощность. Например, в ЦОД «Аэрофлота» мощность одной стойки составляет 10 кВт.
Модульный ЦОД – это двухуровневая модульная конструкция. Блоки располагаются в два яруса: нижний ярус занимает инженерное оборудование, предназначенное для поддержания бесперебойной работы серверного блока на верхнем ярусе. При этом стыковка двух серверных блоков создает единое технологическое помещение для установки активного оборудования, а стыковка двух инженерных блоков – единую инженерную площадку, которую удобно обслуживать. Модульный ЦОД укомплектован всеми необходимыми специализированными системами: гарантированным и бесперебойным питанием, системой поддержания температурно-влажностного режима, системой мониторинга и управления инженерными системами, а также системами газового пожаротушения, видеонаблюдения и др. «ИТ Экипаж» обеспечивает резервирование всей инженерной инфраструктуры до уровня 2N, это решение разработано в соответствии с уровнем резервирования инженерных систем не ниже TIER-III согласно классификации Uptime Institute.
— Кто выступает основными потребителями модульных ЦОДов?
Александр Переведенцев:
— Прежде всего это компании, у которых информационные системы являются основой бизнеса. Операторы связи, банки, торговые сети – все они в той или иной степени зависят от информационных систем, отказ которых может приводить к колоссальным убыткам. Говоря об информационных системах «Аэрофлота», надо понимать, что здесь убытки могут измеряться не только деньгами, а чем-то более серьезным. В частности, с помощью ЦОДов происходит центровка грузов в самолетах по всему миру.
Модульный ЦОД может быть интересен быстро развивающимся компаниям, он может быть установлен в местах с дешевым электричеством, его можно развернуть практически в любом месте без привязки к зданию и наращивать по мере необходимости.
Алексей Зарубин:
— Очень важна быстрота развертывания, ничего не надо строить. Это решение интересно для аэропортов, для транспортных компаний, для нефтяных и газовых компаний.
— Расскажите подробнее о проекте для «Аэрофлота». Почему крупнейший российский авиаперевозчик выбрал именно модульное решение для своего ЦОДа?
Александр Переведенцев:
— Перед проектом был проведен анализ двух вариантов построения ЦОД: аутсорсинг – аренда в коммерческом ЦОД и строительство дата-центра в собственном здании «Аэрофлота». Было два основных фактора принятия решения: доступность критично важных сервисов в режиме 24 х 7 и совокупная стоимость владения. Оказалось, что первый вариант неприемлем из-за отсутствия четких SLA по простою и гарантий соблюдения требований ФЗ 152. Кроме того, совокупная стоимость аренды необходимой инженерной инфраструктуры и дополнительных услуг уже через два года превысила бы совокупную стоимость владения собственным ЦОД, включая капитальные затраты на его построение и эксплуатацию за тот же период.
Расчет второго варианта показал необходимость реконструкции здания и, соответственно, достаточно высокую стоимость развертывания ЦОД, к тому же продолжительные сроки реализации проекта — от полутора до двух лет. В условиях активного развития бизнеса «Аэрофлота» это было неприемлемо.
Поэтому авиакомпания выбрала вариант развертывания модульного ЦОДа на территории собственного летного комплекса в Шереметьево, предложенный «Техносервом» в партнерстве с HP. Реализация проекта заняла шесть месяцев. Решение включало в себя модульный ЦОД «ИТ Экипаж» «Техносерва» и ИТ-инфраструктуру, спроектированную на оборудовании HP под задачи «Аэрофлота».
Алексей Зарубин:
— Проект был выполнен с привлечением лизинговой схемы, организованной подразделением финансовых услуг НР в России.
ЦОД состоит из стандартных модулей, выполненных на базе собственного решения «ИТ Экипаж» «Техносерва», и включает в себя четыре серверных блока, четыре инженерных блока, складской и диспетчерский блоки, а также блок гарантированного электроснабжения. Емкость ЦОД составляет 56 серверных стоек. В серверных блоках установлены рядные кондиционеры, позволяющие отводить от каждой стойки 10 кВт тепла.
— Каковы стратегические планы сотрудничества компаний на следующий год?
Алексей Зарубин:
— Имеется в виду развитие сотрудничества нашего тройственного союза – «Техносерв», НР, «Аэрофлот». Мы сейчас находимся в середине очень интересного пути. Сначала совместными усилиями мы модернизировали основной ЦОД «Аэрофлота». Потом подготовили и построили резервный ЦОД, и теперь ведем кропотливую работу по резервированию тех приложений, которые должны находиться в резервном ЦОД. Это серьезные приложения, и адекватно перенести их в резервный ЦОД очень непросто. Наши задачи на ближайшее будущее состоят в том, чтобы создать работающую инфраструктуру с резервным ЦОДом, не останавливая работу основного. Одна из важных задач – создать катастрофоустойчивую инфраструктуру в системе ЦОД «Аэрофлота».
Важно подчеркнуть, что у «Аэрофлота» очень большие планы на рынке авиаперевозок. Компания планирует стремительно расти. Сегодня этого просто нельзя сделать без активного развития ИТ-инфраструктуры. НР вместе с «Техносервом» готовы сделать все для поддержки этих планов.
— А кто отвечает за эксплуатацию резервного ЦОДа?
Алексей Зарубин:
— Наш тройственный союз. Основная тяжесть ложится на плечи сотрудников ИТ-департамента «Аэрофлота», но при этом им всегда подставят плечо сотрудники «Техносерва» и НР. Стоит отметить, что сотрудники НР проводят и проактивное исследование инфраструктуры «Аэрофлота», и создают рекомендации по ее развитию, не говоря уже о большом объеме профилактических работ.
— Спасибо за очень интересный рассказ!
Беседовал Александр Семенов.
