Всё что-то руки не доходят написать, впечатления от работы на ЧМ на стадионе Екатеребург Арена.
Если кратко и без купюр, то это примерно так:
- дают тебе билет в одну сторону, полторы стойки нерабочего решения и отправляют на месяц, при этом все должно пройти на отлично.
- оборудование wisi гавно.
- eltex гавно.
- КТВ это про хорошо проложенные провода, что б нигде не экранировало.
Ну да ладно, обо всём по-порядку. Началось всё с того, что как раз еду я в электричке и встречаю Толю Фомичева, вот он мне и говорит - а не хочешь на чемпионат мира сгонять? На пару недель, нужно организовать тех поддержку систем КТВ и IPTV. Я, давай конечно, круто! Представляю себе, беру пиво иду смотреть на трибуну футбол, на всякий случай ноут возьму, вдруг кейс то, кто откроет. Время реакции там пять минут как никак. Но всё было не так. Две недели выросли в шесть недель. Футбол я смотрел только на мультискринах и смотрел не на картинку внутри, а на примерно так - блять картинка рассыпалась, это у меня такое или вещателя или в сети стадиона или в Мегафоне? А рабочий день составлял 16 часов. Проклял всё на свете -)).
Первая командировка была в апреле. Приехали мы с Лёхой Силяковым, первый день нас не пустили на стадион и мы поехали в военный музей УГМК смотреть разную технику. Надо сказать, музей очень крутой. Когда попали на стадион пришли знакомиться с коллегам, пришло челок 20, я тогда прифигел от количества народу, однако запомнил почти всех. Но никак не мог понять зачем столько народу пришло. Представлялись все примерно так - я такой-то компания Ланит, но на само деле мы из Крока. Думаю, зачем нам это знать и кто все эти люди? -) Тут надо сказать, что ФИФА предъявляет требования к стадионам, есть документ на 1,5 тыщи страниц, там описано как всё надо организовать и стадион этому должен соответствовать. Фактически это означает, что стадион надо переделать на 1/3. Рядом строиться городок со зданиями для прессы, вещателей, IT служб, столовые, зоны гостеприимства, кафе, ставятся большие экраны и т.д. и т.п. Всё это называется адаптация. Всю эту адаптацию делают куча подрядчиков. Да такая куча, что запомнить их невозможно. Я даже не стал пытаться. Понял только то что конкурс выиграл ланит, а всё делали крок, огрим, какие то чуваки из уралэнерго чтоли, ещё стопитсот компаний и сами вещатели HBS (это те чуваки, чью картинку вы видели в своих телевизорах).
Вторая командировка была в начале мая. Надо было выполнить монтаж нашего хлама, включить его, ну и по-хорошему получить связность с москвой. Но эта такая программа максимум. И вот тут я первый раз столкнулся с тем что весь стадион сопротивляется этой самой адаптации. Тебя почти открытым текстом посылают на хуй. Приходишь говоришь мол мы тут должны работать, телевидение на стадионе будем раздавать, нам нужно взять немного вашего оборудования. Нет, мы ничего не знаем и ничего не дадим. Тут надо отметить что часть инфраструктуры мы используем уже существующей, чего не хватает, доделываем. Прихожу говорю, в этой комнате должны были сделать подводы питания для нашей стойки, где они? Да нет их. Кто их должен делать? А черт его знает. Я три дня выяснял, так и ничего не добился. Кинул времянку от соседней стойки, включил наш хлам и уехал в мск -).
Третья командировка наступила сильно раньше, чем я думал. Согласно контракту, мы должны были запуститься за две что ли недели или может чуть позже, но поскольку часть инфраструктуры не была готова, надо было ехать и на месте разбираться. Вообщем то всё время ухоходило на согласование всякого разного, типа ставили приставки не попали в помещение, нет ключей. Или когда нам подведут электричество или когда же наконец сделают вторую серверную. И прочие подобные вопросы. Их было много, на решении уходило масса времени. Сначала меня это жутко раздражало, что мол кабель воткнуть уходить день-другой. Потом привык, видимо в регионах такой стиль работы, быстро делать не принято -). Наверное, надо бы сказать про услуги на стадионе. У нас их было несколько видеоконференцсвязь, КТВ-1 и КТВ-2. Первое телевидение это 20 каналов которые предоставляет ФИФА, там всякое разное от матчей и интервью до исторических каналов, в общем это такое общее телевидение. Второе телевидение, скорее техническое, с так называемой малой задержкой. Очень специфичная вещь, нужна была только на местах комментаторов и корреспондентов на медиа трибуне. Там 8 каналов, сам матч, разные тактические камеры, плюс статистика два канала, плюс параллельный матч, если был такой. Обе системы кабельного телевидения согласно требованиям, расходились по разным зонам стадиона. Очень много времени ушло на то чтобы втереться в доверие и познакомиться с людьми. Вот тут я подумал, про поездки на картошку. Надо всем стадионом было забухать, так бы и познакомились -). При всех костылях удалось запуститься почти в срок. Стоило это невероятных усилий. Рабочий день начинался в 9, как стадион начинал работу и заканчивался в 2 ночи, ибо в мск народ до 12 ночи (разница во времени с ект) что то вечно писал, рекомендовал сделать. Жуткое напряжение. Серверную для КТВ-2 сделали за неделю до первой игры, но это фигня, на некоторых стадионах за день до игры! В общем первую неделю мне было не до железа, бегал по стадиону, висел на телефоне, знакомился с людьми и стадионом, зарабатывал репутацию, чтобы тебя не сразу посылали -). Вторую неделю уже сел за железяки и тут началось такое от чего волосы дыбом встали. Железяки начали падать от простейших вещей. Выяснилось, что свитчи элтекс жуткий пиздец. Если бы знал взял бы из лабы три циско свитча и не имел бы геморроя. Ну представьте себе, говорю ну я щас подключусь к сети стадиона включаю шнурок и тут бах свитчи падают, разваливается VRRP, OSFP и до свидания москва -). Но надо сказать что этот пиздец коллегам из элтекса удалось частично побороть. У элтекса вообще очень хорошая площадка получилась для тестов их свитчей, приставок и мидлваре. -) С элтексом кое как справились, начались проблемы с головными станциями КТВ. Визи гавно полное, ну представьте прилетает FEC мультикаст из москвы, терминируется он на железяке которая его восстанавливает/очищает, так называемый дефекатор, и если ты на нем выключаешь одну из мультикаст групп, которая уже после принимается на ГС и эта головная станция при том падает! Ну это ж полный пиздец. Я сначала было даже не понял, что случилось. Выключил поток и смотрю картинка посыпалась в сети DVB-C. Вообщем, немного наигравшись, я понял, как с этим гавном жить и бороться и понял, как сделать чтобы оно работало и принцип работает не трогай тут прям вот очень актуален. Стадионы, наверное, вошли в рабочий режим, т.е. все системы заработали без сбоев, только к третьей игре, при чём это касалось в основном систем кабельного телевидения DVB-C. С мультикастом проблем было мало, и было понятно, как с ними бороться. Если бы еще приставки не висли, то можно было и пиво пить и смотреть футбол на стадионе, а не в коморке без окон -). Всю малину портили две вещи приставки и медиа трибуна. Медиа трибуну делал крок. И сделал ее так хуёво как это вообще возможно! Это полный пиздец. Я и Андрей Мезенцев (коллега из Элькарда) всю трибуну облазили на коленках, меняли кабели, обжимали разъёмы, меняли усилители, доставляли усилители. Эту саму трибуну мы вылизали только к 4-му матчу. Из всех трех предоставляемых нами услуг, эта была самая важная. Во время матча все должно работать как часы, при чем атомные -). Если сломается это телевидение будет вселенский скандал. Надо сказать, что мы налажали один раз, когда выловили задержку. При чём на это нам указал комментатор. А всё началось с того что в отеле, где я жил, пол ночи бузили перуанцы, и я рано проснувшись поехал на стадион. В результате раньше времени включил медиа трибуну. На кодерах, на которых мы работали в КТВ-2, была особенность с телеками самсунг. Если долго не переключать каналы накапливается задержка и она видна глазом. Комментаторам важно видеть картинку без видимой разницы между тем что на поле и тем что на экране ТВ. А тут действительно мы смотрим и видим разницу, а это уже пол секунды или даже больше. Мы у себя в серверной желаем замер всё ок, смотрим на экран комментатора и видим задержку. И тут понимаем, да такое бывает, что надо переключить каналы и проблема уйдет или снять несущую в кабеле на секунду другую. Видимо с момента моего включения на этом телеке никто не удосужился переключить каналы. Были ещё забавные проблемы. Это самое КТВ-2 должны быть в ТВ студиях. Приезжают японцы и говорят у вас всего 4 канала на телевизоре. Приходим смотрим и вправду 4-ре. А вам надо все 8? Нет, но положено 8. А вы будете их смотреть? Нет, но положено 8. Но если вы не будете их смотреть, зачем они вам? Ну положено же 8 каналов! Ладно, берём прибор смотрим сигнал, а там полный пиздец. Ну ок берём доку, которую делал крок, ищем разветвители. Ни хуя не находим, материм крок последними словами и весь вечер тянем свои провода. Саня Ларионов, потом специально приходил узнавал, смотрели ли они, так эти казлы вообще телевизор выключили! Гады!! -)) Такого вот всякого смешного и неочень было очень много.
Вообще, я за время работы, понял одну такую простую вещь - надо собрать команду, чтобы весь механизм работал без сбоев. Вот в Ект у нас это вышло. Все понимали, что мы в одной лодке и надо помогать друг другу. Выручали всем чем можно. Меня отправили в командировку и не дали измериловку для DVB-C. Я конечно выкрутился, познакомился с коллегами из Огрим настроили им железки для вещания, эту же железки и обсуживали, а они нам дали измериловку -). Кому то отдали немного кабелей коаксиальных, кому то проходные розетки, кто то приходил к нам пить чай/кофе, да-да на стадионе вода на вес золота, нельзя с собой проносить. Можешь свитч под мышкой внести/вынести, а бутылку воды нет. Вообще охрана - это отдельная песня. В дни матчей стадион очень строго зонируется. Попасть без пропусков никуда нельзя. У нас серверные на разных этажах, иногда надо подняться на этаж или выйти на трибуну. Идешь договариваешься, чтобы пускали. Ко второму матчу меня запомнили и ничего не спрашивали. Был забавный случай. Коллега принёс вилку железную, обедать, так вот не пустили с ней. Рядом в сумке лежит нож раскладной, его можно пронести, а вилку обедать нет -).
При всех сложностях, с которыми пришлось столкнуться, от работы осталось очень положительное впечатление. Получил невероятный отпыт. Хорошая команда, хороший стадион, отличная атмосфера, в том числе и в городе. После 4-го матча, т.е. окончания группового турнира коллеги из HBS угощали пивом. На трибуне мы работали совместно с командой CCR (commenatory control room) это чуваки которые звук дают с комментаторских мест. У них там был глава по имени Колин, ему в дни ЧМ исполнилось 68 лет. Говорит - в Катар не поеду уже наверное. А вообще это моя лучшая медиа трибуна все 6 чемпионатов мира! Даже в Германии были проблемы, у тут нет. Прям гордость берёт, что причастен к этому -). На следующий утро, думаю зайду к Колину попращаюсь, скажу спасибо, прихожу и они уже собрались, ничего не осталось. Ночью скрутили свой хлам и уехали! Вообще HBS при всех накладках, которые были в эфире, суперпрофи. Команда у них прям вот очень крутая. Главный инженер стадиона показывает на провода вдоль стен стадиона и говорит мол эти ваши немцы сделали такой ужас, скажите им чтобы переделали. Смотрим и вправду кабели висят как сопли, а рядом так красиво в к лотку подвязаны. В общем выяснилось что как раз всё наоборот, HBS проложил провода аккуратно, а кто то из подроядчиков сделал очень по нашему -)).
Наверное, ещё отмечу про волонтёров. Я был удивлён, что они в основной массе приезжие. Какие-то прям фанаты, готовы браться за любую работу, ехать в любой город. Без этих ребят ничего бы е получилось. Нет серьёзно.
Последние три дня после окончания группового турнира весь стадион начали разбирать. Все торопились уехать как можно раньше. Этому были разные причины и режим ФИФА на стадионе вывести можно что хош и денег надо экономить. Я свой хлам отправлял уже в переходный период, это надо сказать адок тот ещё. Всю субботу ходил подписывал бумаги на вынос как со стороны ФИФА так и со стороны стадиона. Вообще эти дни были какие то очень печальные. Ты начинаешь понимать, что вот он весь праздник то отшумел, отгремел и вся эта красота, на которую потратили полтора года работ закончилась. Печальные ощущения. В шесть часов вечера я запихал в машину железо отправил его на склад, купил пива и поехал в аэропорт, в 20 у меня был вылет. И если стадион уже практически перестал жить ЧМ, то аэропорт, самолёт и другие города ещё жили футболом. Футбол смотрели все и везде, даже в самолёте перед вылетом спрашивали какой счёт -). Хорошее было время.
Ну и на последок хотелось бы отметить наш КТВ тим и коллег которые помогли нам или мы им -)
Толя Фомичев, Лёшка Силяков, Фалерка Филлипов, Валька Поправко, Серёга Борода, Лёха Царегородцев, Серёга Рацеев, Дима Фомин, Денис Винкус. Это всё АМТ -).
Андрей Мезенцев - Elcard
Олег Кузнецов, Саня Микрюков - подрядчики Оптивера, их на самом деле было больше, но с этими ребятами мы провели большу часть работ.
Серёга Чепкасов - Огрим
Саня Ларионов - ЛОК
Костя Ким - КРОК
Геннадий Чернавцев - НЦИ
Макс Рутынский - стадион
Женя Пожидаев - стадион
Антон Щербаков - стадион
Конечно список не полный, писать его можно долго.
Ниже фото сугобо для себя на память, чтобы было что вспомнить -). Апрель, май, июнь 2018 года Екатеребург.
Возле офиса Мотив стоит памятник связисту. Говорят часть руководства оператора бывшие военные связисты. Они ж этот памятник и поставили.
Паноармама стадиона, ещё до момента установки ТВ на медиа трибуне.
Отчёт на табло до первого матча.
Серверная КТВ-2. Помещение не было построенно на момент сдачи услуги, коллеги из Крока сделали времянку, которая прожила так два с половиной месяца.
Пробный запуск услуги, уже не помню может для комисии УФК, толи для установки ТВ на трибуне. В помещение серверной уже появились стены -).
Магистральный усилок. Вот так незатейливо лежит себе. Заставили спрятать потом в шкаф.
Магистральный усилок на одной из линии.
Уложенные ТВ на трибуне.
Вот так качественно были обжаты разъемы на трибуне.
Из-за этого на телевизорах терялась часть каналов. Хорошо, что у коллег из Огрим был сей прибор.
Медиа трибуна принимает законченный вид -). Надо сказать, когда стоишь на верху вид впечатляет. А когда отключаешь основную магистраль и все ТВ гаснут, страшные ощущения посещают -).
Запуск нашего хлама в недоделанной серверной. Это ещё май месяц.
Акредитация, потом добавил 9-ку, VIP зону -).
Медиа конвертор UTP to coaxial. Я все думал как звук уходит в контрольную команту, а вот так оп езернету. Сошлись на том, что коаксильный кабель даёт большую длину и большую помехоустойчивость. Хотя может это костыль от друвних времен?
Первый матч. Надо сказать больше меня поразило как пели гимн перуанцы. Коллеги из инфотеймента говорила что ФИФА под них изменила даже правила и позволила отголосить весь гимн.
Матч ТВ приехали вот на такой коробке. Работали два матча, один для Мексики, а второй забыл.
Прощальная картинка от коллег из HBS -).