зарисовки по работе
почитать:
по активной просьбе ten_takedo описываю занятия последних нескольких дней.
у нас заканчивается строительство очередной серверной.
было закуплена куча всякого железа (примерно 500 килограмм), необходимо было все это
поставить, подключить.
сначала привезли рейд. по сскольку он поставляется сразу с дисками, на коробке куча
разных нашлепок, напримр вот эта посинеет вся, если коробку при транспортировке наклоняли.
но собирать самому ее нельзя, для этого приезжает специальный человек из местного HP.
получается вот такой шкафчик:
включать самому ее то же нельзя. для этого приезжает из москвы другой специальный человек,
со специальным ноутбуком, на котором стоит специальный софт для первоначальной настройки.
сначала он проверяет по специальному мануалу правильность подключения, потом проверяет по
другому специальному мануалу несколько дестяков хитроспрятанных джамперов, и только потом
нажимает на рубильник (не специальный).
в итоге, после 10 минут запуска и пары часов разбиения и форматирования у нас появляется
StorageWorks XP 20000
который представляет из себя хитрый рейд (стор), производительный и распараллеленый. на фронтэнде
у него имеется 2 платы фибер портов (всего 16 независимых портов, фактически 16 процессоров
обработки), пачка плат с 64 гигабайтами кэша, на бэкенде платы смотрящие на корзинки с дисками,
то же дублирующиеся.
пачка sas (fc) дисков.
пока raid заполнен дисками на половину - неформатированная емкость рейда 9.1 терабайт.
update: этот же специаист называл этот стор "непривычно маленьким", "компактным".
он привык видеть сторы, где логика занимает весь шкаф и есть несколько шкафов дисков. :)
---
рядом с ним я поставил его младщего брата, простенький и медленный TagmaStore.
(килограмм 50 весит)
у него обычные "медленные" sata диски, неформатированная емкость рейда - 11.2 терабайта.
всего 4 фибер порта, но скорее для redundancy, процессор обрабатывающий запросы
у него один (два?).
---
вся оптика приходит на брокейды, которые я привинтил с обратной стороны шкафа:
тут стоят два брокейда, связанные со всеми серверами, и со всеми рейдами. так же,
чуть позже, они будут связаны с точно такими же площадками в других концах города,
образуя единое дисковое пространство/зеркало для кластера.
---
в третьем шкафу расположились сервера.
с самого низа возлегает большой сервера на итаниумах, с hp-ux на борту. Integrity rx6600
с обратной стороны у него видны две двухпортовые сетевухи, и две двухпортове фиберные
карты. и сеть и оптика из каждой карты подключена к двум свитчам, так что в случае
одновременного выхода из строя и сетевухи, и свитча - все равно один линк живой останется.
то же самое касается и питания - его два и они идут на разные ups.
---
дальше идут три одинаковых 2U ксеоновых сервера. Proliant 380 G5
к ним идет уже только две пары фибера - карты однопортовые, хотя так же все пять
езернетов (две двухпортовых сетеухи и сетка набортного менеджмента).
на морде диагностическая табличка с ледами. sas диски.
---
прямо над ними три совсем обычных сервера 1U. Proliant 360 G5
тут еще меньше - два фибера и три сетевых.
хотя подключать неудобно, нет складывающейся "лапы" для укладки кабелей.
---
на самом верху стоит kvm switch.
к нему подлючаются все клавиатуры/мышки/видео серверов, а на нем между ними можно
переключаться.
в закрытом виде компактно занимает 1U.
в раскрытом и слегка выдвинутом виде - примерно так.
---
вся сетка с серверов приходит на пару цисок:
итого семь серверов занимают на цисках 29 портов.
по скольку у этих моделей цисок не предусмотренна установка двух блоков питания, для
обеспечения redundancy (вторым слотом там обязательно должен стоять вентилятор), на задную
стенку я привинтил внешний доп. блок RPC2300, обычно используемый для цисок с PoE, и подключил
к обоим цискам доп питание.
---
а снаружи эти шкафы выглядят примерно так:
обратная сторона:
модный лейбл:
---
рядом с ними стоят две упсы - симметры.
обеспечивая несколькими часами питания, при остуствии его в розетке.
3 фазы в каждую. 16kVa.
все железо завязанно сразу на обе упсы.
обеспечивается полная функциональность в случае выхода из строя любой компоненты:
упсы, любого кабеля, оптического свитча, сетевого свитча, сетевой карты,
оптической карты, дисков...
---
и классический кадр - я в обнимку с упсой:
извиняюсь за качество кадров, все снимал на телефон.
по активной просьбе ten_takedo описываю занятия последних нескольких дней.
у нас заканчивается строительство очередной серверной.
было закуплена куча всякого железа (примерно 500 килограмм), необходимо было все это
поставить, подключить.
сначала привезли рейд. по сскольку он поставляется сразу с дисками, на коробке куча
разных нашлепок, напримр вот эта посинеет вся, если коробку при транспортировке наклоняли.
но собирать самому ее нельзя, для этого приезжает специальный человек из местного HP.
получается вот такой шкафчик:
включать самому ее то же нельзя. для этого приезжает из москвы другой специальный человек,
со специальным ноутбуком, на котором стоит специальный софт для первоначальной настройки.
сначала он проверяет по специальному мануалу правильность подключения, потом проверяет по
другому специальному мануалу несколько дестяков хитроспрятанных джамперов, и только потом
нажимает на рубильник (не специальный).
в итоге, после 10 минут запуска и пары часов разбиения и форматирования у нас появляется
StorageWorks XP 20000
который представляет из себя хитрый рейд (стор), производительный и распараллеленый. на фронтэнде
у него имеется 2 платы фибер портов (всего 16 независимых портов, фактически 16 процессоров
обработки), пачка плат с 64 гигабайтами кэша, на бэкенде платы смотрящие на корзинки с дисками,
то же дублирующиеся.
пачка sas (fc) дисков.
пока raid заполнен дисками на половину - неформатированная емкость рейда 9.1 терабайт.
update: этот же специаист называл этот стор "непривычно маленьким", "компактным".
он привык видеть сторы, где логика занимает весь шкаф и есть несколько шкафов дисков. :)
---
рядом с ним я поставил его младщего брата, простенький и медленный TagmaStore.
(килограмм 50 весит)
у него обычные "медленные" sata диски, неформатированная емкость рейда - 11.2 терабайта.
всего 4 фибер порта, но скорее для redundancy, процессор обрабатывающий запросы
у него один (два?).
---
вся оптика приходит на брокейды, которые я привинтил с обратной стороны шкафа:
тут стоят два брокейда, связанные со всеми серверами, и со всеми рейдами. так же,
чуть позже, они будут связаны с точно такими же площадками в других концах города,
образуя единое дисковое пространство/зеркало для кластера.
---
в третьем шкафу расположились сервера.
с самого низа возлегает большой сервера на итаниумах, с hp-ux на борту. Integrity rx6600
с обратной стороны у него видны две двухпортовые сетевухи, и две двухпортове фиберные
карты. и сеть и оптика из каждой карты подключена к двум свитчам, так что в случае
одновременного выхода из строя и сетевухи, и свитча - все равно один линк живой останется.
то же самое касается и питания - его два и они идут на разные ups.
---
дальше идут три одинаковых 2U ксеоновых сервера. Proliant 380 G5
к ним идет уже только две пары фибера - карты однопортовые, хотя так же все пять
езернетов (две двухпортовых сетеухи и сетка набортного менеджмента).
на морде диагностическая табличка с ледами. sas диски.
---
прямо над ними три совсем обычных сервера 1U. Proliant 360 G5
тут еще меньше - два фибера и три сетевых.
хотя подключать неудобно, нет складывающейся "лапы" для укладки кабелей.
---
на самом верху стоит kvm switch.
к нему подлючаются все клавиатуры/мышки/видео серверов, а на нем между ними можно
переключаться.
в закрытом виде компактно занимает 1U.
в раскрытом и слегка выдвинутом виде - примерно так.
---
вся сетка с серверов приходит на пару цисок:
итого семь серверов занимают на цисках 29 портов.
по скольку у этих моделей цисок не предусмотренна установка двух блоков питания, для
обеспечения redundancy (вторым слотом там обязательно должен стоять вентилятор), на задную
стенку я привинтил внешний доп. блок RPC2300, обычно используемый для цисок с PoE, и подключил
к обоим цискам доп питание.
---
а снаружи эти шкафы выглядят примерно так:
обратная сторона:
модный лейбл:
---
рядом с ними стоят две упсы - симметры.
обеспечивая несколькими часами питания, при остуствии его в розетке.
3 фазы в каждую. 16kVa.
все железо завязанно сразу на обе упсы.
обеспечивается полная функциональность в случае выхода из строя любой компоненты:
упсы, любого кабеля, оптического свитча, сетевого свитча, сетевой карты,
оптической карты, дисков...
---
и классический кадр - я в обнимку с упсой:
извиняюсь за качество кадров, все снимал на телефон.