Інфраструктура вузла зв'язку від чайника, або чергове будівництво серверних — частина 1

Доброго дня! Начитавшись публікацій на тему будівництва ЦОД невеликого хостинг провайдера, а так само «як зробити серверну кімнату своїми руками», від людей, які, мабуть, не знали, як сказати, навіщо треба замовляти послуги, я вирішив викласти свій досвід будівництва невеликого вузла зв'язку протягом цього року, для розміщення, з подальшою реєстрацією в Роскомнадзор, таких об'єктів, як ОТУМС, ТЗУС, СПД.

В цьому році припадало настільки багато інформації шукати і застосовувати, що я відчув свою межу в запам'ятовування корисної інформації. Тому мені складно відразу згадати звідки я брав інформацію (я кажу про наказах Мінкомзв'язку, Мінінформзв'язку, Роскомнадзора, ДБН, ВСН… ).

Під катом я постараюся поверхнево пройтися по всім аспектам, за якими треба прийняти рішення і реалізувати у вашій апаратної.

Інфраструктура приміщення
Якщо починати з вибору приміщення, то треба врахувати, що інфраструктура цього приміщення повинна мати хоча б такий набір елементів і конструкцій:

  • Кабельні траси: лотки під стелею та/або в підлозі (як вирізаний жолоб в бетонній підлозі, так і під фальшполом.
  • Система енергопостачання та енергорозподілу
  • Шафа/стелаж для розміщення збірок ланцюгів АКБ.
  • Система газового пожежогасіння.
  • СКД.
  • Відеоспостереження.
  • Окремо стоїть конструктив з трубчастими профілями для кріплення 10-ти парних плинтов, якщо у вас є потреба організації безлічі мідних СЛ (PRI наприклад) між обладнанням або від близько розташованих партнерів/замовників.
  • Межстоечные мідні та оптичні кроси.
  • Зрозуміло шафи/стійки.
  • Система кондиціонування (клімату) з резервом
  • Вогнестійкість будівлі (II або III ступеня).
  • Над приміщенням автозала (будемо називати так нашу серверну) не повинно знаходитися санвузлів та інших комунікацій пов'язаних з використанням води.
  • Підлоги в автозале повинні бути негорючими, на які настилають чисті підлоги у вигляді антистатичного негорючого лінолеуму або плитка фальшпола.
  • Якщо до приміщення є вікна, то як мінімум їх необхідно плівкою або тонувати закрити фанерою, так як на трансформатори й акумулятори не допускається попадання сонячних променів. В іншому сонячні промені нічого доброго не зроблять і для іншого обладнання. В ідеалі вікон бути взагалі не повинно, але навряд чи це стане вирішальним фактором, якщо всі інші умови можна виконати.
  • Стіни автозала не повинні бути виконані з горючих матеріалів. Це не тільки протипожежна причина, але і необхідність спорудити ізольовану камеру на випадок відпрацьовували системи пожежогасіння.
  • Система газо-димовидалення, на випадок спрацювання системи пожежогасіння.
  • Освітлення повинно бути хорошим. В якомусь ВСН по освітленню я бачив цифру в 200лк. Але в принципі я думаю такої проблеми немає, тому просто подбайте про хороше освітлення, бажано з захистом від пилу.
  • Вогнестійкі двері з ущільнювачем по периметру (для герметичності).
  • Всі металеві конструкції (шафи, лотки, стелажі, двері) повинні бути заземлені.
  • Весь простір в стінах автозала навколо кабельних і вентиляційних вводів повинні бути закладені азбестом або спеціальною протипожежною піною (помаранчева або червона така).
  • Батареї та інші металеві конструкції, які можуть служити пристроєм заземлення, необхідно відгородити не струмопровідними матеріалами, що б виключити можливість замикання стійок або корпусів устаткування на ці конструкції через тіло людини (при одночасному дотику).
  • І трохи з охорони праці та електробезпеки: таблички категорії приміщення і ступеня небезпеки, з прізвищем відповідального; позначення на розетках і заземлюючих пристроях, плакати з електробезпеки, пожежогасіння та першої допомоги (зазвичай теми плакатів вибирають наближаючи описані ситуації до своєї галузі); вуглекислотні вогнегасники і аптечка; гумові діелектричні килимки перед і позаду шаф і стійок

Електропостачання

В залежності від того, які у вас плани на ваш автозал, ви можете вибрати певний рівень захищеності від відключень електроенергії.

Ви можете відкрити будь-яку з частин «Правил застосування обладнання транзитних, оконечно-транзитних і кінцевих вузлів зв'язку» (там 14 частин під різні типи вузлів зв'язку) і у всіх буде відсилання на

наказ №59 від 16 травня 2006 р:П. 9.3. Переходи з основних джерел на резервні, включаючи акумуляторну батарею і назад, здійснюються без обриву електроживлення.
П. 9.4. Мінімальний запас ємності акумуляторної батареї забезпечує нормальне функціонування вузла зв'язку протягом 2 ч.
А також на:

наказ №32 від 13.03.20077. Для забезпечення безперебійності електропостачання електроприймачів і категорії надійності, включаючи електроприймачі особливої групи I категорії надійності, при порушенні електропостачання на час перемикання з одного джерела живлення на інше використовуються акумуляторні батареї з ємністю, що забезпечує електропостачання електроприймачів з розрахунковим часом розряду в годину найбільшого навантаження не менше 2 годин для електроприймачів особливої групи I категорії надійності і не менше 8 годин для електроприймачів і категорії надійності.

8. Електропостачання електроприймачів II категорії надійності в нормальному режимі здійснюється від двох незалежних взаємно резервують джерел електроживлення.

9. В якості одного з незалежних джерел живлення електроприймачів II категорії надійності допускається використання дизель-електричної станції.
… який в свою чергу втратив чинність у зв'язку з купою змін… і загалом тепер треба керуватися

наказом №97 від 8 серпня 2005 р.6. В цілях забезпечення безперебійного функціонування засобів зв'язку, що входять до складу вузлів зв'язку, точок приєднання мережі зв'язку, базових станцій фіксованого абонентського доступу, а також базових станцій мережі рухомого радіотелефонного зв'язку та мережі рухомого радіозв'язку, що використовуються резервні автономні джерела живлення, що забезпечують при порушенні зовнішнього електропостачання функціонування зазначених засобів зв'язку у складі мережі зв'язку не менше 4 годин при навантаженні, що відповідає години найбільшого навантаження.

Але при цьому посилання на 32 наказ є, а в 97 не розписано, який вузол зв'язку до якої категорії електроприймачів відноситься. У зв'язку з цим не зрозуміло, яку категорію потрібно забезпечити. Якщо раптом хто в темі — поділіться, будь ласка, інформацією.

Але припустимо, ви визначилися з тим, яка категорія електроприймача у вас і ви беретеся її забезпечувати. Для безпеки вашого бізнесу у вас в будь-якому випадку повинен бути введення з міської підстанції, ДБЖ і генератор на 2-5кВт (приблизно стільки знадобиться вам для невеликої апаратної з двома стійками, забитими різним обладнанням). А значить необхідно в ввідно-розподільний пристрій (ВРП) організувати АВР (автоматичне введення резерву) з функціями запуску генератора (можна вручну, якщо є чергова зміна на об'єкті).

Можливо у когось постане питання, як все це реалізовувати, в якому вигляді, як його розмістити?

  • По-перше, це питання до електриків. Якщо у вас в штаті таких немає – зверніться в організацію, яка зробить монтаж ВРУ з АВР. До виробу повинен бути паспорт.
  • По-друге, – ви можете самі спробувати зібрати, використовуючи пару силових контакторів з механічної та електричної взаємно блокуванням, реле контролю напруги з НЗ/АЛЕ контактами. Мені таке довелося зібрати для цілей забезпечення певної інфраструктури об'єкта в цілому (відеоспостереження, система пожежогасіння, СКД, вентиляція, аварійний світло). А автозал живиться від введення, де окремо організована система АВР з двох фідерів від різних підстанцій та запуском дизель-генератора.
Простий АВР для роботи з двома вводами:

image

Отже, ви маєте електроустановку всередині вашого майбутнього автозала. Далі вам потрібно буде відводити звідти лінії на навантаження. Зважаючи на те, що по периметру приміщення зазвичай розташовуються стелажі для обладнання, шафи для АКБ та інші металеві конструкції (включаючи двері), то добре було б зробити по периметру стрічку заземлення, до якої можна чіпляти все, що вам захочеться поставити уздовж стін і буде необхідно заземлити.

Зважаючи на те, що ваше обладнання повинно бути підключене через ДБЖ, то перша очевидна лінія від вашого ВРУ піде саме до ДБЖ. У моєму випадку це 3-х фазний APC Symmetra, яку я б не радив купувати через її поточної вартості. Можна знайти ДБЖ більш скромних виробників. Основними я б виділив наступні критерії для себе:

  • 3-х фазні, якщо всі живлення через один ДБЖ або 1 фазні, якщо ставити ДБЖ в кожну стійку для забезпечення індивідуального (в масштабах автозала) резерву.
  • якість вихідного сигналу
  • наявність байпаса
  • гаряча заміна акумуляторного модуля (можливо і силового модуля)
  • моніторинг
  • видача харчування на навантаження через розетки С19 або притискні контакти
  • підключення зовнішньої збірки АКБ
І вже від ДБЖ відводити лінії на блоки розеток в стійці(ах), в залежності від місця установки вашого ДБЖ (загальний або індивідуально кожен шафа).

Тут у схемі електроживлення є вузьке місце — ДБЖ. Тому конструкція ДБЖ повинна бути або така, в якій ламатися нема чому (APC Symmetra наприклад, без силових і батарейних модулів представляє із себе просто мідні шини (практично)).

Якщо ви використовуєте ДБЖ індивідуально на шафу, то подбайте про те, що б в шафи були лінії від різних ДБЖ, а блоки живлення обладнання були підключені до різних ДБЖ.

Або ж є третій варіант: у вас ДБЖ дозволяє забрати від нього силову лінію, затягнути назад у АВР, а далі зібрати схему, при якій можна подавати живлення на лінію або через ДБЖ, або безпосередньо від міського введення або генератора. Така схема дозволить знімати ДБЖ з лінії для регламентного обслуговування і ремонту.

З інвертором струму схеми аналогічні схемам з ДБЖ, якщо він у вас досить серйозний, що б на навантаження лінії йшли з більш або менш серйозних клем. А якщо у вас невеликі інвертори, то, як правило вони і не заточені під те, що б з ним забирати великим перетином харчування на навантаження. Такі ставляться усередині стійки, де вони будуть використовуватися. А якщо є потреба підключити багато обладнання (а не одну-дві залізяки), то з клемної колодки інвертора відводиться лінія в РЩ в самій шафі і там через шини або АВ 2P (або через АВ для мінуса і шину для плюса) вже відводяться лінії на навантаження.

У мене для цілей розміщення ДБЖ і інверторів встановлена окрема каркасна стійка з великою цифрою значення несучої маси, в яку приходять лінії живлення від ВРУ з АВР. А потім з якої йдуть лінії живлення на шафи з обладнанням.

Тут я б хотів відзначити кілька моментів, пов'язаних з вибором матеріалів і комплектуючих:

  • Автоматичні вимикачі в ВРУ вибирайте з урахуванням селективності, не тільки за номіналом, але і по часу спрацьовування (для цього треба вибирати лінійку продуктів від виробників, і, бажано, використовувати продукцію одного бренду).
  • Намагайтеся максимально використовувати пожежобезпечні матеріали всередині вашого автозала, тому я вибрав кабель ВВГнг-RFLS + гофрована труба ПНД (чорна і помаранчева).
  • За тим же міркувань вибрали блоки розеток — не горючий пластик, випробування на пожежобезпечність, без вимикача і обов'язково з клемної колодкою, для підключення кабелю від ДБЖ. Може в мене одного такі проблеми, але я витратив кілька днів на пошуки потрібних мені блоків розеток. Все що пропонується в пошуку — це відверто не якісний «китай» з вбудованим кабелем як правило маленького перерізу, або з роз'ємом С13, з якого рано чи пізно шнур випаде, не кажучи вже про те, що готовий кабель з жилами 2,5 мм2 не знайти, до того ж хотілося використовувати ввгнг-rfls, а закрити його у вилку C14 добре не вийде. У підсумку я знайшов блоки розеток з пожежобезпечного пластику з клемної колодкою всередині. До речі виробляють їх в Єкатеринбурзі і продукт в цілому відмінний, але довелося допрацьовувати — розсвердлити отвір для введення, шукати фіксують скоби кабелю… купив 8 штук — використовував поки 4 і жодного однакового вироби не попалося :). Зараз я б рекомендував або такий же спосіб, або блоки розеток з вбудованим кабелем з промисловим роз'ємом. Причому якщо у вас великий автозал, і стійки ви будете ставити по мірі необхідності, то варіант з блоками розеток з промисловими роз'ємами виглядає зручніше, так як ви просто підключаєте новий шафа до підведеної лінії. І це буде надійне з'єднання.
  • Живлять лінії для ЩРЗ постійного струму в кожен шафа я зробив з ПУВГ кабелю (синій і червоний) гофре. Якщо ви погуглите ЩРЗ, то побачите що це таке і що там буває навіть функціонал моніторингу стану лінії від АВ до обладнання.

Розрахунок автономності вашої електроустановки та вибір АКБ

Для того, що б зрозуміти, скільки вам потрібно купити акумуляторів (а саме цього питання, бо це вимагає багато грошей), то немає нічого складно якщо ви знаєте, на яке навантаження на енергосистему ви розраховуєте в ЧНН (годину найбільшого навантаження). Для вбудованих всередину батарейних блоків інформацію по автономності ви знайдете в матеріалах для ДБЖ, а для підрахунку необхідної ємності зовнішньої збірки потрібно перемножити вольтаж складання на ємність і поділити на навантаження (t=V*Ah/Wt). Але так як розряд акумулятора це не лінійний процес, то треба в мануалах до акумуляторів подивитися графіки розряду і в залежності від часу, який у вас вийшло, застосувати коефіцієнт знайдений у паспорті. Тоді ви отримаєте більше або менше реальний час автономії від вашої системи АКБ. Виходячи з цього ви зрозумієте, яку ємність вашої збірки АКБ треба забезпечити.

У статті про будівництво власного маленького ЦОД для маленького хостинг провайдера використовувалися автомобільні акумулятори, зважаючи на їх дешевизну щодо не обслуговуються АКБ розроблених для застосування на мережах зв'язку (особливі режими експлуатації — постійний заряд, рідкісний розряд, тривала віддача). Якщо хочете через 1-2 роки їх міняти (в залежності від розрядки і глибини цієї розрядки), то звичайно можете користуватися таким варіантом. Тільки треба врахувати, що ці АКБ є обслуговуються, а значить в разі чого (перегрів наприклад), вони можуть потекти або випаровуватися через кришечки — а значить їх потрібно в окреме вентильоване приміщення ставити і все таке… У випадку ж використання герметичних не обслуговуються АКБ ви можете розміщувати їх хоч в стійках з обладнанням (на дні шафи або на консольних полицях), експлуатувати від 3 до 8 років (дивлячись яка гарантія від виробника на життєвий цикл) і проводити тестування вашої системи живлення за регламентом.

Альтернативна думка
Я вище писав про блоки розеток… але насправді я вважаю, що правильніше підключати обладнання від АВ до РЩ всередині стійки. Так з'єднання виходить надійним і захищеним. Але тут є деякі незручності. В основному вони пов'язані з тим, що обладнання має цілком конкретну розетку С14, вилку для якого (С13) не завжди можна знайти належної якості. В результаті вона може там хитатися і слабке місце вже буде там. До того ж треба врахувати, що не всі інженери хоча б знають, що таке ПУЕ, а їм треба мати можливість безпечно включити обладнання (опустимо той момент, що по техніці безпеки будь інженер повинен бути як мінімум з 3-ю групою в скоринці з електробезпеки + супровід відповідального з 4-ою групою — всі ми розуміємо реальність буття).

Інфраструктура кабельних трас
Для того, що б прокладати кабель з різних куточків вашого автозала (від вводів в саму апаратну або шафи з акумуляторами) вам потрібно кабельні лотки. Це може бути система кабельних лотків під фальшполом, або лотки під стелею, що проходять по периметру приміщення і над стійками… В моєму випадку було прийняте рішення: під стелею йдуть кабельні лікті, а в підлозі був вирізаний жолоб, що проходить під телекомунікаційними шафами, шафи з АКБ і відгалуження до ВРУ на стіні. Жолоб оббитий залізом (і заземлений), а зверху накритий 4мм сталевими аркушами, які так само як і весь інший підлогу, вкриті антистатичним не пальним лінолеумом. Потрібно поставити нові стійки – прибрати з потрібних місць лючки, поставили стійки, подтащили по жолобу лінії живлення постійного і змінного струму і все. При цьому жолоб в підлозі використовується тільки для силової проводки, а сітчасті лікті під стелею використовуються для мідних СЛ оптичного кабелю.

Незважаючи на те, що устаткування ще не инсталлировалось в цей автозал, кабельні лікті вже займаються джгутами мідних ліній і оптичними кабелями. А саме були сдельны перекидні кроси між стійками. У мене є дві кросові конструкції: стійка однорамна і конструктив з трубчастими монтажними профілями для 10-ти парних плинтов. З телекомунікаційних стійок в однорамную стійку приходять джгути UTP з кожної стійки, які з обох сторін розшиті на патч панелі. Аналогічно організовано оптичний перекидний крос.Таким чином будь-які кросування між устаткування в різних стійках виконується короткими патч-корду в межах своєї стійки. А вхідні поодинокі мідні лінії в автозал (СКС з офісу на 8 ліній і мідні з'єднання з партнерами теж приходять на раму з кросами, після чого перекидаються вже на потрібне обладнання.

А здоровенна рама для плинтов мені потрібна, зважаючи на необхідність організувати великий обсяг сполук PRI портів між станційної і транспортної стороною. Плата транспорту SDH або медіа шлюзу розшивається відразу на потрібну сторону конструктиву, потім кроссируется при необхідності звичайним кроссировочным шнуром.

Завдяки тому, що силові кабелі в мене йдуть по жолобу в підлозі, а слаботочка заходить в шафи зверху, вони практично не перетинаються один з одним (у мене є обладнання, живлення якого включається спереду), навіть з урахуванням того, що кроси розташовані на задніх монтажних профілів.

Телекомунікаційні шафи і стійки
На мою думку, якщо ви будуєте вузол зв'язку або серверну, де буде ваше основне, або одне з основних місць дислокації, то мінімальні розміри шафи повинні бути 800х1000 (ШхГ), стандартною висотою 42U, з цоколем або на 10см підняті над підлогою, а так само отворами для введення кабельної інфраструктури, як через цоколь, так і через стелю. Хоча я віддаю перевагу 47U, тому що коли в шафу всякого набивається, юніти стають дефіцитом і зробити з цим нічого не можна буде.

І я не просто так написав «розміри шафи». Я вважаю, що стійки (просто подвійна каркасна рама) можна використовувати тільки для стендів тестування і кросів. Через деякий час експлуатації ряду стійок, ви виявите, що патч-корди були прокинуты ліанами між стійками з усіх сторін, навіть якщо ви самі любите порядок, то хтось інший обов'язково для прискорення процесу кине таку шморгаю, а потім забуде переробити до того, як там пустять клієнтський сервіс. Саме тому мають бути шафи і у них обов'язково повинні бути закриті бічні панелі і закриваються двері.

Для того, щоб двері закривалися завжди, монтажні профілі встановлювати хоча б на 10см вглиб, як спереду, так і ззаду. Якщо їх ставити близько до дверей — можуть виникнути незручності з обладнанням, яке виступає вперед своєю передньою панеллю за монтажні профілі, + SFP модуль стирчить + оптичний патч-корд в ньому. Як результат — двері гнути патч-корди, якщо взагалі зможе закритися. Буквально недавно з-за такої не продуманості довелося кілька раз їздити на сайт, де у нас був встановлений cwdm в орендованій стійці (до речі сам він навіть не випирав за межі площини монтажних профілів). Двері могли закрити по-різному і вона по-різному притискала патч-корди, гублячи лінки. Добре, що зрозуміли в чому справа ще на етапі тестування та наколхозили по-швидкому рішення. А для того, що б мати можливість втопити монтажні профілі, і потрібна глибина шафи від 1000мм — у разі придбання задоволеного сервера (на 800 наприклад), ви не зможете закріпити санчата на профілях розставлених ближче ніж 800мм, а сам сервер не зможе до кінця заїхати в стійку. (принаймні у платформ Intel така конструкція санчат).

Самі двері бувають скляні або перфоровані (хтось купує цілком сталеві без перфорації). Тут вибір під завдання і способи забезпечення клімату. Якщо холодне повітря у вас подається в коридор, то сенсу брати скляні двері (двері або без перфорації) ніякого немає. Беріть перфоровані двері і все ваше обладнання буде охолоджуватися забираючи повітря з фронтальної частини (сервера особливо), виганяючи нагріте тому. Якщо ж ви підводите рукава з холодом під стійку, то потрібно брати стійки з глухими дверима.

У шафі обов'язково повинні бути вертикальні органайзери на передньому монтажному профілі і, за необхідності, на задніх. У мене вертикальні органайзери з обох сторін, бо спереду організується підйом і спуск міді та оптики, а ззаду підведення живлення до обладнання та UTP від серверів (знову ж мідь з даними йде по одній стороні, а силові шнури з іншого). Причому при підводі живильних кабелів у стійку, прикиньте, з якого боку у вас будуть блоки живлення — з того і підводите лінію. Тоді інша у вас буде для укладання міді від серверів і каталистов (для прикладу) з платами в задніх слотах…

Клімат
Вважається начебто не складно. Якщо ви не знаєте, які у вас будуть потім потреби, то можна швидко прикинути і вийти на 2 варіанти:

  • відразу промислові або напівпромислові кондиціонери потужністю, достатньою для покриття максимального тепловиділення (вважається на основі максимально можливого споживання електроенергії на стійку, з коефіцієнтом 0,9 для впевненості; а для точності — треба дивитися паспорт на обладнання).
  • поставити побутовий спліт… потім ще один… потім ще… Тільки подбайте про те, що до цих сплитам можна було в майбутньому підключити який-небудь модуль керування з датчиками, що б все це було трохи розумним.
У будь-якому випадку повинен бути резерв системи підтримки температуру від 18 до 24°С і вологість в районі 50-60% у вас в автозале. У нас наприклад великий кондиціонер живиться від електромережі, ніж автозал. І от якщо хтось зможе його погасити, то автоматично запуститься спліт система, які так само без проблем впораються з цим завданням, але харчування вони візьмуть з електромережі з дизелем, але без дорогоцінного автономного ресурсу ДБЖ.

Ще можна займатися автоматизацією і моніторингом, в залежності від того, на що здатні кондиціонери… У нас наприклад є блок управління спліт системою, який моніторить температури в кількох точках автозала і задає режим роботи декількох кондиціонерів.

Але загалом для мене ця тема досить далека і все, що нам необхідно було робити з цього питання — робила підрядна організація. В планах тільки прикрутити до цієї системи сигналізацію від систем типу netping або чогось такого, що б запускалися додаткові кондиціонери не тільки, коли великий відключиться.

Системи безпеки
  • Система пожежогасіння. Для гасіння пожежі повинен застосовувати газ. Це небезпечно для людей, але безпечно для вашої інфраструктури. Зрозуміло при спрацюванні система буде кричати задану кількість секунд і тільки після цього розкриє балон з газом. Тому персонал повинен бути проінструктований, не глухим і не сліпим, що б бачити светосигнальную інформацію про стан пожежної системи. Як правило, систем пожежогасіння є панелі індикації і управління — персонал заздалегідь повинен бути навчений розуміти і користуватися цими пристроями.

  • Охоронна сигналізація. Тут краще користуватися регламентом експлуатації системи, який видасть охоронна організація. Тут сказати нічого. Якщо у вас на об'єкті постійно хтось присутній, а приміщення знаходиться на території, що охороняється службою безпеки власників будівлі, то можливо вона вам і не потрібна.

  • СКД. Згідно нормативно-правової документації від Мінінформзв'язку (Наказ від 9 січня 2008р №1), у приміщення вузлів зв'язку повинні мати доступ лише особи виробляють монтаж, експлуатацію та технічне обслуговування обладнання. Тут питання не тільки безпеки доступу до обладнання (а адже електронні мітки або паролі можуть вкрасти у менш підготовлених осіб — наприклад бухгалтерії або менеджера), але і по техніці безпеки. Навряд чи у того ж менеджера є посвідчення з електробезпеки і він проходив інструктаж. А з того моменту, як ви розтягнули електроживлення по шафах — все ваше приміщення — це одна електроустановка.

  • Відеоспостереження. Як і будь-яка інша система безпеки, її харчування повинно бути зарезервовано і доступ до елементів керування повинен бути обмежений. Камери слід вибирати з PoE харчуванням, що б ні від якої розетки на стіні не було залежності. В автозале камери слід розміщувати не лише для фіксації інцидентів безпеки, але і для розбору польотів з технічним персоналом. Справа в тому, що інженер може зробити що-то випадково, а потім не зізнаватися, побоюючись розправи. Наприклад, якщо все-таки використовувати блоки розеток з підключається кабелем в роз'єм С14, то рано чи пізно звідти випаде вилка С13, особливо якщо там хтось вирішить полазити і розхитає кабель. Аналогічно і з боку обладнання — якщо шнур погано сидить в роз'ємі блоку живлення обладнання — знайдіть спосіб, як поліпшити його посадку. Іноді це буває просто поганий дешевий провід — я таки відразу викидаю. А іноді роз'єм обладнання вже деформувався (висох пластик з часом, наприклад). Або ж інженер може випадково не той патч-корд вийняти. У мене був випадок на першому році роботи в телекомі, коли SFP модуль застряг в платі, а дуже потрібно було терміново його замінити. Як я тільки не намагався його звідти вийняти. А це був Juniper MX5-T… саме тоді я дізнався, що інтерфейсні плати у нього не прикручуються до корпусу — вилетіла вся 20х1Gb плата забита робочими лінками… Камер в нас правда не було, але я і не став приховувати обставини події.
Готуючись до введення в експлуатацію
У зв'язку з тим, що невеликі оператори зв'язку мають право реєструвати сайти за спрощеною схемою, з недавніх пір відпала необхідність готувати проекти на всі інженерні системи вузла (електроживлення, кондиціонування, освітлення, пожежогасіння, і здається був раніше проект кабельних трас). Це означає, що при подачі документів в Роскомнадзор на реєстрацію вузла зв'язку, ви маєте право не надавати цей пакет документів. Але зроблено у вас все повинно бути, бо як перевірочні комісії технагляду ніхто не відміняв і вони цілком собі можуть прийти і провести інспекцію вашого небезпечного (або особливо небезпечного об'єкта. Тому не варто відступати від реалізації всього цього тільки тому, що ваше керівництво з'ясувало, що нічого цього не треба для реєстрації сайту. Рано чи пізно ці системи відпрацюють і врятують від збитків або смерті.

Після того, як ви вирішили, що закінчили з облаштуванням своєї апаратної і тепер справа тільки за інсталяцією і включенням обладнання, переконайтеся, що у вас є якийсь набір документації і технічних регламентів, який зберігається в безпосередній близькості до обслуговуваного обладнання:

  • схеми розподілу електроживлення
  • схеми освітлення
  • схеми прокладки трас кондиціонування
  • регламенти та дати введення в експлуатацію АКБ, кондиціонерів, генератора, АВР, пристроїв заземлення.
  • схеми на перекидні кроси
  • регламент і пилосос для прибирання приміщення: т. к. у вас повинно вийти досить герметичне приміщення, то пилу там з часом братися практично не від куди, а сміття залишений інженерами буде регулярно з'являтися — ковпачки від патч-кордів оптики і SFP модулів, обрубки жив витої пари, укатившиеся гайки і болти — з усім цим прекрасно справляється недорогий будівельний пилосос (kercher наприклад)
  • схеми на що приходить на об'єкт ВОЛЗ з рефлектограммами
  • підписано і позначено має бути буквально все — будь-який елемент дистрибуції электроптитания, шафи і двері з табличками за призначенням та класом небезпеки, відповідальні, схеми евакуації на світиться в темряві основі; якщо у вас по периметру йде шина заземлення, то вона не повинна бути зафарбований і відзначена як заземлюючий пристрій. На одному підприємство у знайомого технагляд зажадав розфарбувати крайку шини в червоно-зелені смуги.
Чому я нічого не написав боротьбі з шумом?
Безглуздо боротися з шумом небаченими стійками з шумоізолюючими панелями… Тишуну можна зробити тільки трьома способами:

  • вимкнути з розетки все, що шумить
  • дотримуватися правил вибору приміщення для автозала описаної в цій статті і проблема шуму відпаде, за умови, що робочі місця знаходять за межами цього приміщення
  • в якійсь мірі допоможе включити тихий режим в BIOS серверів.


Звичайно ж цей матеріал складно назвати корисним на 146%. Я не проектувальник, а тому не можу вам дати вичерпні посилання на матеріали, по яких треба готувати себе до виконання завдань, описаних у статті. Підозрюю, що навіть проектувальники не тримають у голові все ДБН, ВСН, НТП на будівлю і приміщення, ПУЕ, та нормативно-правову документацію від Минком/информсвязи, Роскомнадзора, Рос/технагляду. Практично нічого не знаю про охорону праці — це взагалі окрема тема. Але я намагався розповісти про те, на чому треба зупинятися і починати вчитуватися, що б не помилитися.

Можна почати з цим документів і постаратися зрозуміти чого потрібно дотримуватися. НТП 112-2000 РД 45.120-2000 — документи з купою посилань на все те, на що треба спиратися при будівництві вузла зв'язку. З нього правда стане в нагоді всім, напевно, лише кілька пунктів:

  • ВСН 45.122-77 — проектування штучного освітлення підприємства зв'язку
  • ВСН 116-93 — може бути в нагоді, але досить стара інструкція з проектування лінійно-кабельних споруд зв'язку
  • ВСН 332-93 — Інструкція з проектування електроустановок підприємств і споруд електрозв'язку
І посил, який я просто не знайшов куди встромити:

купуючи будь-кабель, електротехнічний виріб, шафи, кросівок обладнання – вибирайте з сертифікатами серії ССС або декларація відповідності в області зв'язку — чим ближче до зв'язку, тим краще. Багато звичайно сертифікатів/декларацій в області зв'язку немає і не потрібна, але тоді хоча б відповідність ГОСТ. На електричний кабель наприклад є ГОСТ, є і ТУ продукт економії на виробництві… Нічого крім ГОСТ брати не варто — ви потрапите на занижені характеристики і склади матеріалу.

просто якісні матеріали. Наприклад на плинты не потрібна сертифікація або відповідність у галузі зв'язку. Але взяти плінт від krone та інший китай, через пару років ви побачите, що krone все так само тримається на монтажних трубках, а «китай» підсохла і тертя не достатньо, що б він залишався бачити там, де його встромили. Трохи недбалого ставлення, і ви пізнаєте різницю в міцності і еластичності пластику. Сам я на все це натрапив тільки в цьому році, коли довелося розбирати старий крос і з noname виробником і з krone.

Напевно багато хто скажуть, що не потрібно їм це все в серверних, тим більше в малому бізнесі. Ви праві, але прагнути до чого-то ж треба? Вибирайте межі, які ви готові досягти і досягайте. У будь-якому випадку нормативу галузі зв'язку мені здається найбільш адекватною і обгрунтованою.

У наступній частині я спробую викласти принципи вибору і розміщення обладнання, а так само способи підключення до слабкострумових мереж та електроживлення.

Всі зауваження по орфографії, правопису і опечаткам будь ласка в особисті повідомлення.

Так само я буду радий, якщо ви поділіться тим, які рішення ви застосовували при облаштуванні інфраструктура.

PS: вибачте мене будь ласка за відсутність табуляції в редакторі вона є, але в пост парсером не переноситься. Вирішити це питання ніяк не зміг.
Джерело: Хабрахабр

0 коментарів

Тільки зареєстровані та авторизовані користувачі можуть залишати коментарі.