Работоспособность вычислительного комплекса обеспечивается инженерной инфраструктурой, включающей в себя следующие системы: бесперебойного электропитания, прецизионного кондиционирования, распределения питания, контроля параметров окружающей среды, а также стоечные решения. Все системы охвачены средствами централизованного мониторинга и автоматизации. Основой для построения инженерной инфраструктуры было выбрано комплексное решение APC InfraStruxure. Оно представляет собой хорошо интегрируемую и гибкую архитектуру, легко масштабируемую и наращиваемую вместе с ростом нагрузки.
Вычислительный кластер, работоспособность которого обеспечивается комплексом инженерного оборудования, располагается в десяти стойках APC NetShelter, установленных в два ряда. Три стойки полностью укомплектованы блейд-серверами (по 4 шасси в каждой), а в двух размещены системы управления кластером, системы хранения и внутренний коммутатор, функционирующий на базе технологии Infiniband.
Высокая плотность размещения оборудования создает пиковую тепловую нагрузку около 18 кВт на стойку. При таком тепловыделении принципы воздушного охлаждения, применявшиеся при построении предыдущего кластера, уже не работали. Для нового суперкомпьютера было принято решение использовать чиллерную систему охлаждения. Предложение АРС by Schneider Electric пришлось как нельзя кстати”.
Благодаря размещению стоек в два ряда таким образом, что оборудование обоих рядов стоек выдувает горячий воздух в одно и то же пространство – “горячий” коридор, а также наличию в одном ряду со стойками внутрирядных кондиционеров APC InRow удалось получить предсказуемое и эффективное решение по отводу тепла при таких высоких тепловых нагрузках. Кондиционеры APC забирают воздух из “горячего” коридора, пропускают через встроенный в них теплообменник воздух-вода (нагревая таким образом воду и остужая воздух) и выдувают холодный воздух в коридор перед стойками (перпендикулярно ему). При этом нет необходимости задумываться о принудительной подаче воздуха непосредственно в стойку, ибо благодаря вентиляторам, встроенным в ИТ-оборудование, и передней перфорированной двери стойки холодный воздух легко забирается работающим оборудованием. Для улучшения эффективности и оптимизации количества блоков InRow решение обеспечивает контейнеризацию “горячего” коридора посредством дверей по его бокам и крыши, смонтированной на крышах стоек. Это существенно уменьшает проникновение горячего воздуха из “горячего” коридора в холодный при таких больших тепловых мощностях.
Вычислительный кластер, работоспособность которого обеспечивается комплексом инженерного оборудования, располагается в десяти стойках APC NetShelter, установленных в два ряда. Три стойки полностью укомплектованы блейд-серверами (по 4 шасси в каждой), а в двух размещены системы управления кластером, системы хранения и внутренний коммутатор, функционирующий на базе технологии Infiniband.
Высокая плотность размещения оборудования создает пиковую тепловую нагрузку около 18 кВт на стойку. При таком тепловыделении принципы воздушного охлаждения, применявшиеся при построении предыдущего кластера, уже не работали. Для нового суперкомпьютера было принято решение использовать чиллерную систему охлаждения. Предложение АРС by Schneider Electric пришлось как нельзя кстати”.
Благодаря размещению стоек в два ряда таким образом, что оборудование обоих рядов стоек выдувает горячий воздух в одно и то же пространство – “горячий” коридор, а также наличию в одном ряду со стойками внутрирядных кондиционеров APC InRow удалось получить предсказуемое и эффективное решение по отводу тепла при таких высоких тепловых нагрузках. Кондиционеры APC забирают воздух из “горячего” коридора, пропускают через встроенный в них теплообменник воздух-вода (нагревая таким образом воду и остужая воздух) и выдувают холодный воздух в коридор перед стойками (перпендикулярно ему). При этом нет необходимости задумываться о принудительной подаче воздуха непосредственно в стойку, ибо благодаря вентиляторам, встроенным в ИТ-оборудование, и передней перфорированной двери стойки холодный воздух легко забирается работающим оборудованием. Для улучшения эффективности и оптимизации количества блоков InRow решение обеспечивает контейнеризацию “горячего” коридора посредством дверей по его бокам и крыши, смонтированной на крышах стоек. Это существенно уменьшает проникновение горячего воздуха из “горячего” коридора в холодный при таких больших тепловых мощностях.