Серверное помещения центра обработки данных
Подготовили рабочую документации для проведения строительных работ, заказа и поставки оборудования, монтажа и пуско-наладки для серверного помещения центра обработки данных (далее - СЦОД).
Виды и цели выполнения работ
Серверное помещение центра обработки данных (далее - СЦОД) предназначено для:
- Размещения серверного и сетевого оборудования;
- Обеспечения непрерывности функционирования серверного комплекса, а также связанных с ними производственных процессов;
- Обеспечения расположенного в СЦОД оборудования гарантированным электропитанием;
- Обеспечения защиты от несанкционированного доступа к информационным системам ЦОДа.
В результате выполнения работ должны быть достигнуты следующие цели:
- Подготовлена рабочая документации для проведения строительных работ, заказа и поставки оборудования, монтажа и пуско-наладки.
- Осуществлена поставка материалов оборудования и комплектующих на объект.
- Проведены монтажные и пусконаладочных работ.
- Сдача объекта в эксплуатацию.
Наличие проектной документации
В ходе проектирования, при оформлении рабочей и исполнительной документации, при выполнении монтажных и испытательных работ необходимо руководствоваться требованиями следующих стандартов и нормативных документов:
- TIA-942. Телекоммуникационная инфраструктура центров обработки данных
- EIA/TIA-568-B. Стандарт на телекоммуникационные кабельные системы в коммерческих зданиях;
- EIA/TIA-569-A. Стандарт на телекоммуникационные кабельные трассы и помещения в коммерческих зданиях;
- EIA/TIA-606. Стандарт на администрирование телекоммуникационных инфраструктур в коммерческих зданиях;
- TLA/ELA TSB75. Дополнения к правилам построения горизонтальной кабельной системы открытых офисных пространств;
- EIA/TIA-607. Стандарт на защитное и технологическое заземление для телекоммуникационного оборудования;
- EN 50173. Информационные технологии. Структурированные кабельные системы;
- ISO/IEC 11801:2002 Edition2. Информационные технологии — структурированные кабельные системы для помещений заказчика;
- ISO/IEC 14763. Создание и эксплуатация кабельных систем помещений заказчиков;
- Правила устройства электроустановок (ПУЭ), издание 7-е;
- ГОСТ Р 50571.21-2000. Электроустановки зданий. Заземляющие устройства и системы уравнивания потенциалов в электроустановках, содержащих оборудование обработки информации;
- ГОСТ Р 50571.22-2000. Электроустановки зданий. Заземление оборудования обработки информации;
Рекомендации К.27. Конфигурация электрических соединений и заземление внутри телекоммуникационных сооружений. МСЭ-Т, 1996. (сектор стандартизации международного союза электросвязи - International Telecommunication Union - ITU). Recommendation K.27. Bonding Configurations and earthing inside a telecommunication building. ITU-T, 1996
Требования по выполнению сопутствующих работ, оказанию сопутствующих услуг
В ходе строительно-монтажных работ должна быть обеспечена целостность существующих архитектурно-планировочных решений, инженерных и коммуникационных систем. Применяемые решения, используемые материалы и монтажные работы не должны нарушить или вступить в противоречие с требованиями строительных и санитарных норм, предписаниями пожарной и производственной безопасности.
Допускается установка внешних блоков вентиляционных систем на крыше здания. Исполнитель по согласованию с заказчиком обеспечивает наличие всех необходимых для проведения монтажных работ машин и механизмов на объекте автоматизации, за свой счет осуществляет доставку оборудования на место его монтажа.
Общие требования к выполнению работ, их качеству
в том числе технологии выполнения работ, методам и методики выполнения работ
Требования к СЦОД
Состав оборудования
В серверном помещении предполагается разместить следующее оборудование:
- Серверный комплекс;
- Активное сетевое оборудование;
- Оборудование IP-телефонии
- Кросс СКС;
- Серверный кросс;
- Источник бесперебойного питания (ИБП) СЦОД;
- Кондиционеры системы охлаждения серверного комплекса;
- Монтажные конструктивы;
- Инженерные конструкции;
- Кабельные трассы СКС;
- Контрольная аппаратура и баллоны системы газового пожаротушения СЦОД.
- Система видеонаблюдения, СКУД.
Требования к помещению.
Основные требования к помещению обеспечиваются на этапе строительных работ в соответствии с положениями СН 512-78, РД 45.120-2000, международных стандартов EIA/TIA-569, TIA-942 и др. (п. 3.1). Остальные требования (микроклиматические, к чистоте воздуха, пожарной безопасности и т.д.) указанных стандартов должны обеспечиваться при проектировании инженерных систем.
Требования к монтажному конструктиву.
Серверное, сетевое оборудование и кроссовые поля располагаются в типовом 19” монтажном конструктиве (телекоммуникационные шкафы или стойки; далее - «шкафы») типоразмером 42U. Глубина шкафов - не менее 1000 мм.
Выбор между открытым или закрытым типом конструктива определяется, исходя из возможностей и технических особенностей систем вентиляции и кондиционирования, с учетом обеспечения требований производителя в отношении окружающей среды и соблюдения норм по уровню шума в окружающих СЦОД офисных помещениях. Общее количество шкафов с указанием примерных параметров по энергопотреблению. Количество, размеры и вес конструктивов под ИБП СЦОД определяется в ходе проектирования. Размеры и количество кроссовых полей определяются при проектировании СКС здания.
Примерное общее количество аналоговых телефонных портов АТС-500. Примерное общее количество информационных портов активного сетевого оборудования - 500 для офисных помещений и 20 для оборудования СЦОД. Расстановка монтажных конструктивов должна осуществляться, исходя из технических особенностей решения по СКВ. При этом должны соблюдаться требования в отношении размеров зоны обслуживания - не менее 914 мм с передней и задней стороны.
Кроме того, должен быть обеспечен путь прохода к каждому шкафу от входа в СЦОД шириной не менее 1,5 м в самой узкой части. При установке в ряд шкафы должны быть скреплены друг с другом по боковой или верхней части каркаса. Ввод электрических проводов и кабелей горизонтальной подсистемы СКС в шкафы должен осуществляться снизу. При этом должны соблюдаться требования электромагнитной совместимости и расположение элементов системы СКВ. Сечение электрических проводов должно соответствовать нагрузке, рассчитанной для каждой стойки. Способ укладки кабелей внутри шкафов не должен препятствовать последующей установке активного оборудования.
Требования к электропитанию оборудования СЦОД.
Электропитание основного оборудования СЦОД осуществляется от системы бесперебойного питания, состоящей из двух ИБП, включенных по схеме N+1. Каждый монтажный конструктив (шкаф или стойка) должен быть укомплектован стоечными блоками розеток от каждого контура. Подключение оборудования, укомплектованного двумя блоками питания, осуществляется по обоим контурам. Общее количество розеток в каждом шкафу должно быть достаточным для подключения планируемого оборудования и предусматривать 20% резерв. Каркас каждого телекоммуникационного шкафа (стойки) должен быть присоединен к общей шине заземления, связанной с единым очагом заземления здания.
Требования к системе гарантированного электроснабжения (СГЭ).
Целью выполнения работ по проектированию и реализации СГЭ в рамках настоящего проекта является:
- обеспечение высококачественного гарантированного электроснабжения оборудования серверного помещения;
- создание сетей технологического (СТЭ) и бытового (СБЭ) электроснабжения автоматизированных рабочих мест.
- размещение ДГУ (проект): в кожухе, на расстоянии 20м от здания.
Расчет потребляемой мощности.
Установленная мощность для оборудования, подключаемого к ИБП СЦОД - 60 кВт.
Расчетная активная мощность потребителей, подключаемых к ДГУ:
- В установившемся режиме не более 200кВт;
- При подключении нагрузки к ДГУ (проект)единовременно - не более 132кВт.
Общие требования
При расчете электроснабжения необходимо оценить общее энергопотребление и предусмотреть, если потребуется организацию дополнительных вводов. Система электроснабжения должна обеспечивать надежную работу СЦОД и помещения в целом в трех режимах:
- нормальном - при наличии напряжения на городском вводе;
- предаварийном - при кратковременных (до 10 мин.) отключениях напряжения на городском вводе и запитывании оборудования СЦОД, рабочих мест и аварийных систем от источников бесперебойного питания (ИБП) до введения в действие дизель-генераторной установки (ДГУ);
- аварийном - при продолжительных отключениях напряжения на городских вводах и переключения всех основных систем электроснабжения помещения на питание от ДГУ, вводимого в действие с помощью устройства автоматического ввода резерва (АВР).
Требования к ИБП.
Необходимо предусмотреть два источника бесперебойного питания:
- Для обеспечения работы серверного и сетевого оборудования СЦОД;
- Для обеспечения работы рабочих мест и инженерных систем помещения, не допускающих отключения.
- Батареи ИБП должны обеспечивать поддержку электроснабжения ориентировочно - 20 мин.
ИБП СЦОД.
ИБП СЦОД должен обеспечивать надежное и качественное электропитание от аккумуляторных батарей всего серверного и активного сетевого оборудования, а также оборудования телефонии в течение 20 минут (не менее) в предаварийном или аварийном режимах. Конструкция ИБП должна быть модульного типа с резервированием уровня N+1.
ИБП должен быть построен по системе двойного преобразования, рассчитан на подключение по трехфазной схеме и предусматривать работу по внешнему и внутреннему байпасу.
В состав комплекса ИБП должны быть включены:
- Платы параллельной работы ИБП;
- 6 программируемых «сухих» контактов;
- Интерфейс RS232 (9-pin D-тип разъем);
- 1 выходной сигнал с программируемыми функциями.
Окончательные требования к техническим характеристикам ИБП будут уточняться в процессе проектирования.
ИБП инженерных систем
ИБП промышленного класса должен обеспечивать электропитание определенных рабочих мест и следующих инженерных систем помещения в предаварийном режиме:
- Системы контроля доступа (СКУД) и видеонаблюдения;
- Систем противопожарной и охранной сигнализации и пожаротушения;
- Систем дымоудаления и приточной вентиляции;
- Системы аварийного освещения;
- Системы эвакуационного освещения;
ИБП должен быть рассчитан на подключение по трехфазной схеме и предусматривать работу по внешнему и внутреннему байпасу.
Требования к распределительной системе электропитания и АВР
Система автоматического переключения (АВР) должна обеспечивать электропитание указанных групп потребителей в следующих режимах:
- В основном режиме (от основного ввода) - все группы потребители СЦОД;
- В аварийном режиме (от резервного ввода) - все группы потребители СЦОД
Зарядка батарей ИБП должна происходить как в нормальном, так и в аварийном режимах. В ДГУ( проект) должны быть встроены средства для оповещения персонала о возникновении аварийных ситуаций.
Требования к внутренней электрической проводке.
Групповая проводка для подключения ИБП должна выполняться по пяти проводной схеме медным проводом соответствующего сечения. Требования к электропитанию инженерных систем офисных помещений определяются подрядчиками соответствующих работ.
Все электрические розетки для подключения оборудования на рабочих местах и в СЦОД должны быть типа «Евро стандарт» и иметь заземляющий контакт, соединенный с единой системой заземления здания.
Требования к заземлению.
Высоковольтное и низковольтное распределительные устройства должны иметь единую систему заземления, соединенную с внешним очагом заземления здания. Величина сопротивления заземления не должна превышать 0,5 Ом. При замерах величины сопротивления необходимо учитывать сезонный коэффициент. В случае необходимости, предусмотреть отдельное заземление для аппаратуры постоянного тока. Заземление ДГУ(проект) выполнить присоединением к существующему контуру заземления здания.
Требования к инженерному обеспечению объекта
Требования к инженерной инфраструктуре СЦОД
Фальшпол и потолок
Для обеспечения направленного распределения холодного воздуха от системы кондиционирования и удобства подвода кабелей к шкафам, помещение СЦОД должно быть оснащено системой фальшполов. Просвет между фальшполом и чистым потолком должен быть не менее 2600мм. Расстояние между строительным полом и фальшполом должно быть не менее 300 мм.
Расчет допустимой нагрузки
Конструкция фальшполов должна учитывать систему расстановки 19 шкафов (стоек), их количество, функциональность и мощность нагрузки. Оборудование вычислительных систем проектируется, исходя из расчетной нагрузки на пол не более 600 кг/кв.м. При этом необходимо учитывать то, что отдельные устройства вычислительной системы могут создавать точечную нагрузку на пол до 500 кг. Плиты перекрытия здания рассчитаны на максимальную нагрузку 600 кг/кв.м. При расчете нагрузки необходимо учитывать также средний вес фальшпола, строительных конструкций и проложенных под ним кабелей.
Требования к материалам и конструкции
Конструкция фальшпола должна выдерживать расчетные нагрузки и состоять из легко съемных модулей (плит). Необходимо предусмотреть рамы для тяжелого оборудования. Для регулировки уровней основного пола и фальшпола, на входе в помещение СЦОД должен быть смонтирован пандус. Крутизна конструкции пандуса не должна превышать отношения 1:8.
В зависимости от конструктивного решения и требований СКВ может потребоваться обеспечить направленную подачу холодного воздуха из-под фальшпола в монтажные шкафы спереди на перфорированные двери и/или через низ.
Материал покрытия фальшпола должен отвечать следующим требованиям:
- иметь электрическое сопротивление относительно земли от 1,0 (минимум) до 20 МОм (максимум) при изменениях относительной влажности от 20 до 60% и температуры от +18 до +24 °С;
- обладать повышенной износостойкостью и низкой возгораемостью.
В серверном помещении запрещается использование ковровых покрытий. Поверхности под фальшполом должны окрашиваться или герметизироваться для предотвращения отслаивания и пыления материалов стен или перекрытий.
Подвесной потолок
Подвесной потолок в серверном помещении не предусмотрен. Монтаж кабелей в подпотолочном пространстве осуществляется в проволочных лотках или кабельростах. Требования к монтажу по ОСТН-600-93.
Система автоматического пожаротушения СЦОД.
При проектировании системы автоматического газового пожаротушения необходимо соблюдать требования нормативных документов:
- НПБ 110-03
- НПБ 88-2001
- РД 78.145-93.
Система автоматического газового пожаротушения (АГП) должна обеспечивать автоматическое тушение пожара в помещении СЦОД. Принцип функционирования АГП должен базироваться на выпуске под давлением газового огнетушащего состава, безопасного для электронных компонентов и систем, располагающихся в помещениях СЦОД.
АГП должна включать в себя:
- систему пожарной сигнализации (СПС) и оповещения о пожаре, интегрированная с общей системой пожарной сигнализации предприятия.
- оптическо-дымовые сигнализаторы об очаге пожара;
- система газовых магистралей и форсунок;
- емкости для газа;
- устройства автоматического пуска газа в газовые магистрали и к форсункам;
- система контроля и регистрации уровня заполнения газовых баллонов;
- систему автоматического контроля и управления системами вентиляции и кондиционирования
- систему дымоудаления и подпора воздуха;
- индивидуальные средства пожаротушения.
Система должна приводиться в действие автоматически при возникновении пожара. Также должна быть предусмотрена возможность ручного запуска. СПС должна осуществлять контроль над пространствами рабочей зоны помещений и пространствами под фальшполом.
Система должна осуществлять непрерывную автоматическую диагностику состояния функциональных элементов. Отображение состояния СГПТ и ситуационного плана осуществляется с рабочей станции оператора.
Газ, применяемый для тушения пожара, должен быть безопасным для обслуживающего персонала и иметь сертификат для применения на территории Российской Федерации. Обязательно наличие 100% резерва огнетушащего состава для обеспечения перезарядки системы в случае срабатывания в течение 1 суток.
В помещении серверной должны быть предусмотрены углекислотные или бромэтиловые огнетушители.
Система кондиционирования СЦОД
Исходные данные для проектирования системы кондиционирования
Расчетные параметры наружного воздуха
Расчетные параметры тепловой нагрузки принимаются в соответствии с планировочным решением по помещениям, и количеством установленного теплового и технологического оборудования с суммарным тепловыделением.
Требования к оборудованию
В качестве оборудования системы кондиционирования воздуха принять автономные прецизионные кондиционеры производств Emerson или аналог с выносными воздушными конденсаторами блоками, оснащенные низкотемпературными комплектами, работающими на фреоне R407C.
Схема размещения внутренних блоков кондиционеров уточняется на этапе проектирования. Режим работы оборудования системы кондиционирования - круглосуточный и круглогодичный. Резервирование систем кондиционирования осуществляется по схем N+1.
Отвод конденсата от кондиционеров должен производиться в существующую канализационную систему здания. Все коммуникации прокладываются обособленно. Фреонопроводы должны иметь теплоизоляцию, представляющую собой трубку из вспененного синтетического полимера.
Перечень технологического оборудования
К основному оборудованию системы кондиционирования по созданию необходимых микроклиматических условий в помещениях серверной и ИБП относятся: внутренние блоки прецизионных кондиционеров, воздушные наружные конденсаторные блоки.
Требования к автоматизации системы
Внутренние блоки кондиционеров и соответствующие конденсаторные блоки должны быть оснащены системами контроля и управления на базе микропроцессорных контроллеров. Система управления кондиционера должна обеспечивать его работу в автоматическом режиме и реализовывать следующие основные функции:
- автоматическое поддержание заданных параметров воздуха;
- сигнализацию неисправных состояний:
Система управления блока кондиционера должна обеспечивать его работу в автоматическом режиме и реализовывать следующие основные функции:
- включение и отключение компрессора по сигналу запроса охлаждения от кондиционера;
- непрерывный контроль основных параметров работы агрегата;
- индикацию на дисплее текущих значений параметров;
- сигнализацию неисправных состояний.
Предусмотреть объединение кондиционеров в локальную сеть, для реализации сетевых функций контроля и управления кондиционерами. Обеспечить автоматическое отключение кондиционера при возникновении пожара путем подачи внешнего сигнала.
Требования к системе освещения СЦОД.
Во всех рабочих зонах СЦОД должно быть обеспечено достаточное освещение. Для этого должны быть предусмотрены две подсистемы освещения:
- основная - подключенная к одному из вводов электропитания СЦОД;
- аварийная - подключенная к распределительному щиту системы АВР.
Каждая подсистема освещения должна иметь (начиная от вводного устройства) свою независимую сеть с распределительными щитами и коммутацией нагрузок (допускается систему аварийного освещения выполнить по объему 10-20 % от основной).
Цепи освещения не должны подключаться к распределительному щиту, используемому для электропитания вычислительных систем и комплексов. Не следует применять регуляторы освещенности, которые являются источником электромагнитных помех.
На путях эвакуации должно быть предусмотрено эвакуационное освещение, работающее от автономных источников электропитания, и имеющее светящиеся указатели направления к выходу.
Требования к системе диспетчеризации и системе контроля параметров окружающей среды
Система должна обеспечить мониторинг и оповещение функционирования систем ИБП, кондиционирования, ДГУ по протоколу SNMP на оборудовании фирмы Emerson Network Power или аналог.
Требование к системе контроля доступа и видеонаблюдения
Система должна обеспечить:
- Не менее двух видеокамер на ряд;
- Контроль зон входа и провоза оборудования;
- Длительность хранения видеозаписей не менее 1 месяца;
- Длительность хранения информации о доступе не менее 12 месяцев;
- Обеспечить вывод сигналов видеокамер и считывателей системы контроля доступа на внешние системы.
Требование к безопасности выполнения работ и безопасности результатов работ
Используемое оборудование и материалы должны исключать нанесение вреда здоровью или поражение персонала объекта автоматизации электрическим током и электромагнитными излучениями при условии соблюдения правил эксплуатации оборудования. Используемое оборудование и материалы должны исключать нанесение ущерба окружающей среде.
При оказании услуг на территории Заказчика, специалисты Исполнителя обязаны соблюдать требования техники безопасности, электробезопасности, пожарной безопасности, производственной санитарии, охраны труда в соответствии с характером выполняемых работ, правила внутреннего трудового распорядка, действующего на территории заказчика.
Требование по передаче заказчику технических и иных документов по завершению и сдаче работ
Оформление проектной документации должно соответствовать ГОСТ 34.601-90 и ГОСТ 21.101.97 и перечисленным в нем стандартам ЕСКД и СПДС. Материалы представляются Заказчику в 2 экз. на бумажном носителе, а также в электронном виде на CD в формате PDF и DWF.
Требования к рабочей документации
Рабочая документация оформлена и включает в себя:
- титульный лист;
- ведомости документов;
- общие данные;
- структурную и принципиальную схему структурированной кабельной системы;
- поэтажные планы кабельных трасс СКС и ЭМ;
- схемы размещения оборудования в коммутационном центре;
- однолинейные схемы дополнений в этажные распределительные щиты;
- таблицу соединений;
- спецификацию оборудования, изделий и материалов;
- локальные сметы;
- рабочие чертежи, предназначенные для производства строительных и монтажных работ;
Требования к исполнительной документации
По окончанию монтажных работ выпускается исполнительная документация с указанием расположения кабельных каналов, розеток и другого коммуникационного оборудования с обозначениями, соответствующими маркировке, нанесенной на кабелях, портах розеток и коммутационных панелях. По результатам проведенных испытаний (тестирования) кабельной системы выпускаются протоколы с распечатками результатов тестирования по каждому рабочему месту. Исполнительная документация также должна включать:
- протокол замера сопротивления изоляции электрических цепей;
- протоколы замера сопротивления заземления соответствующих элементов и конструкций;
- акты на скрытые работы;
- сертификаты на оборудование и материалы;
- протокол наличия цепи между заземлёнными установками и элементами заземлённой установки;
- протокол проверки согласования параметров цепи «фаза-нуль» с характеристиками аппаратов защиты и непрерывности защитных проводников;
протокол проверки и испытаний выключателей автоматических, управляемых дифференциальным током (УЗО); - схемы вентиляции (принципиальные, соединений);
- протокол проверки автоматических выключателей до 1000 В;
Требования к сопроводительной документации на поставляемое оборудование.
При поставке стандартного оборудования Подрядчик передает Заказчику:
- паспорт и техническую документацию на это оборудование в объеме, предусмотренном заводом-изготовителем при поставках в РФ;
- инструкцию по эксплуатации, ремонту и обслуживанию, необходимую для правильной эксплуатации оборудования и поддержание его в постоянной готовности;
- инструкцию по монтажу, пуску, регулированию и обкатке оборудования, которые должны содержать сведения, необходимые для технически правильного монтажа, пуска, регулировки и обкатки оборудования. В инструкции должны содержаться правила демонтажа оборудования;
- гарантийные обязательства;
- документ, подтверждающий соответствие поставляемого оборудования противопожарным и противовзрывоопасным нормам страны Заказчика;
- товаросопроводительную документацию;
- ведомость ЗИП, которая является документом, устанавливающим назначение и номенклатуру запасных частей, комплектующих изделий, инструментов и принадлежностей, которые необходимы для установленного срока эксплуатации.
Требование по монтажу поставленного оборудования, пусконаладочным и иным работам
Проект должен:
- охватывать все помещения СЦОД Заказчика;
- обеспечивать возможность поэтапного ввода систем в эксплуатацию и их расширения без демонтажа (замены) оборудования, установленного на более ранних этапах.
Поставляемое оборудование материалы и комплектующие должны иметь соответствующие документы (сертификаты, паспорта и т.д). Монтаж должен быть выполнен с соблюдением требований соответствующих стандартов, по окончании монтажа должны быть предъявлен комплект необходимых документов ( протоколы, тесты и т.д), подтверждающий качество работ.
Требование по техническому обучению персонала Заказчика работе на подготовленных по результатам выполнения работ объектах. В рамках проекта, необходимо предусмотреть обучение персонала Заказчика работе на подготовленных по результатам выполнения работ объектах.
Требования по объему гарантий качества работ. Гарантия качества распространяется на все работы, выполненные в соответствии с данным техническим заданием. Требования по сроку гарантий качества на результаты работ. Исполнитель предоставляет на оборудование, гарантию изготовителя.
На материалы срок гарантии определяется поставщиком материалов и составляет 15-20 лет (при соблюдении правил эксплуатации). На работы гарантия должна составлять не менее 1 года после подписания актов выполненных работ.