Блейд-серверы: первое шасси вместо восьми стоечных

Клиент пришёл с задачей расширить вычислительные мощности: текущие серверы уже не справлялись, нужно было добавить ещё несколько машин под разные роли. Когда мы посчитали, что нужно восемь новых 1U-серверов, разговор сам собой свернул в сторону блейдов. Не потому что модно - а потому что восемь стоечных машин это восемь блоков питания, шестнадцать кабелей питания, шестнадцать или больше сетевых кабелей, и всё это нужно как-то организовать в стойке, которая и без того не резиновая.

Шасси HP BladeSystem p-Class мы рассматривали первый раз всерьёз. До этого видели на выставках, читали материалы, но реального опыта не было. Предложили клиенту - он согласился, хотя цена шасси с лезвиями заметно выше набора аналогичных стоечных машин. Аргумент простой: стоимость одного юнита в стойке в московском ЦОД не копеечная, и если блейды дают плотность в два-три раза выше - разница в цене железа отбивается на аренде.

Что реально поменялось

Первое впечатление, когда шасси встало в стойку - тишина снаружи. Не в смысле бесшумное, шасси гудит своими вентиляторами вполне ощутимо. Тишина в смысле отсутствия кабельного джунгля. Питание и сетевые коммутаторы - внутри. Снаружи только кабели от шасси к патч-панели и к PDU, и всё.

Восемь лезвий с точки зрения кабельного хозяйства выглядят как один ящик. Сзади стойки наконец можно пройти без риска задеть что-нибудь критичное.

Централизованное питание - отдельная тема. У стоечных серверов блоки питания свои, каждый со своим КПД, каждый греет своё. В шасси питание общее с высоким КПД и резервированием на уровне модулей. На бумаге это выглядит красиво. На практике - один большой потребитель вместо восьми маленьких. И вот тут начался первый серьёзный разговор с клиентом.

Пересчёт ИБП и охлаждения

Шасси под нагрузкой потребляет суммарно примерно столько же, сколько те восемь стоечных машин. Это понятно - железо то же самое, физика не меняется. Но характер нагрузки другой: один источник с пиковым потреблением, а не восемь распределённых. ИБП, который был рассчитан на существующую стойку плюс небольшой запас, этот пик мог не пережить.

Мы сели считать. Взяли паспортное максимальное потребление шасси, добавили текущую нагрузку стойки, прикинули запас на расширение. Оказалось, что ИБП нужно заменить на следующий типоразмер. Клиент этого не ожидал - в первоначальном бюджете ИБП не фигурировал как статья расходов.

С охлаждением похожая история. Шасси само по себе управляет температурой лезвий через свои вентиляторы, это хорошо. Но тепло всё равно идёт в серверную. Восемь 1U были распределены по стойке равномерно, горячий воздух выходил в нескольких точках. Шасси выбрасывает тепло с одного конца, и если серверная не организована по принципу горячий/холодный коридор - локальный перегрев вполне реален. У клиента серверная была небольшая, кондиционер один, циркуляция воздуха не спроектированная. Пришлось перемещать стойку и добавлять направляющие для воздуха.

Управление - плюс, с оговоркой

Управляющий модуль шасси даёт консоль ко всем лезвиям в одном месте. Видишь состояние каждого модуля, температуры, питание, сетевые порты. Для удалённой работы с оборудованием это заметный шаг вперёд по сравнению с восемью отдельными iLO-карточками, к каждой из которых нужен отдельный IP и отдельное подключение.

Оговорка в том, что шасси - это точка отказа другого масштаба. Если с отдельным 1U что-то случилось - упал один сервер. Если проблема на уровне шасси - потенциально все восемь лезвий. На практике у HP шасси резервированы по питанию и вентиляции, но сам факт концентрации рисков в одной точке требует осознания. Мы это проговорили с клиентом явно.

Кому блейды подходят, а кому нет

Подходят: компании с несколькими однотипными серверами, которым важна плотность в стойке, предсказуемый рост парка в рамках одного шасси и централизованное управление. Особенно актуально при аренде места в ЦОД, где юнит стоит реальных денег.

Не подходят или рано: небольшая серверная с одним-двумя серверами - шасси избыточно и дорого. Ситуация, где серверная не готова по питанию и охлаждению - придётся вложиться в инфраструктуру раньше, чем в железо. Бюджет, в котором стоимость лезвий против стоечных машин некомфортна - апелляция к долгосрочной экономии работает не всегда.

Общая стоимость проекта у клиента вышла выше запланированного из-за ИБП и доработки охлаждения. Это нормальный итог первой встречи с новой архитектурой: не всё учтёшь в теории. В сопровождении инфраструктуры такие вещи лучше проверять до закупки, а не в процессе монтажа.

Результатом клиент доволен. Стойка стала заметно аккуратней, восемь лезвий управляются из одного места, кабельного хаоса нет. Посмотрим, как поведёт себя в длительной работе.