КАК МЫ ПРОВОДИЛИ infocomm_русская версия и чуть не поседели

кейс для занудных технарей
Кейсы описывать интересно. Даже если они не супер удачные.

Мы отвечали за техническую организацию Infocomm_русская версия (29-30 июня 2020 г.), главного события на рынке мультимедиа этим летом.
https://www.isrussia.ru/online/infocomm-connected-2020/

И кто был в эфире, тот знает - все прошло не гладко. У нас висла трансляция, заливалась техничка в эфир, был рассинхрон. В общем, так себе пример профессионального мероприятия. И дальше будут подробности.
Как у нас устроен эфир
Epiphan Pearl2 - видеомикшер, мультиоконник, запись, стриминг.
NewBlue Titler Pro - графика в эфире: титры и бегущая строка
То есть тут видно, что работа с источниками идет на одном устройстве. Графика прилетает по NDI с отдельной титровальной машины.
В чем была проблема
Это единственный сетевой интерфейс на Pearl2, обратная часть на самом устройстве выглядит также, контакты обожжены и приварились к пластику. Но вышел он из строя не сразу и не весь. В этом то и была главная засада. Линк то отваливался полностью, то работал нормально, то работал на скорости 100 - 200 кбит/с.
Хронология
Пятница, 26 июня
Местная управляющая компания предупреждает нас, что МОЭК проводит работы электроподстанции. Пару раз отключают электричество. Рапортуют, что работы с электрикой завершены, можно жить дальше.
Сейчас я думаем, что в этом было начало проблемы.
Infocomm День 1.
Взлетаем нормально. Начинаются доклады. Запускаем бегущую строку с рекламой партнеров. И видим, как резко проседает эфир, начинаются зависания. Для справки: когда идет графика с титровалки по NDI, то нагрузка на интерфейс подскакивает до 30 - 50 Мбит/с. В целом это не критично, так как интерфейс гигабитный. Мы запускаем бегущую строку второй раз и снова видим зависания. Делаем вывод, что причина именно в ней и отключаем ее.

Заканчиваем первый день, все останавливаем. Начинаем скачивать записи (у Pearl2 это происходит по FTP) и видим, что скорость скачивания буквально 200 кбит/с. Беда. Перегружаем его и вообще теряем линк. Сетевой интерфейс перестает подавать признаки жизни.

Звоню ребятам из Брюллов консалтинг, прошу помочь. Они говорят - привози, мы дадим замену.

Делаем пару экспериментов и обнаруживаем, что коннект напрямую к ноуту нормальный. И делаем НЕПРАВИЛЬНЫЙ вывод, что причина в интерфейсе на роутере Mikrotik.

Сбрасываем его в заводские настройки. И внезапно все поднимается и работает нормально. И это подтверждает наш неправильный вывод, что дело в роутере.

Пишу в Брюллов консалтинг, что проблему нашли, устройство можно не менять.

Спокойные уходим домой.
Infocomm День 2.
Полчаса до старта конференции. Запускаем стрим на ютуб и фейсбук. И видим, что скорость стрима не поднимается выше 100 кбит/с. То есть веб-интерфейс и управление работают (им полосы хватает), а вот стрим не идет.

ок, берем машину с Vmix, втыкаем грабер. Запускаемся. Обнаруживаем, что конкретно на этой машине грабер дропит кадры, и принимает от силы 15-20 fps. Обнаруживаем это не сразу, а когда началась конференция.

Перебрасываем грабер на другую машину. У нее из софта только, прости хоспади, OBS. Запускаем стрим на ютуб, забываем про звуковой микс. В эфир летит не только звук конференции, но и все вокруг, включая наши разговоры. Настраиваем звук. Но машинка не справляется и дает рассинхрон видео со звуком.

Перебрасываем в третий раз. Уже все ок. Ведем стрим только на ютуб. На фейсбук не вещаем от греха подальше.

В чате признаемся, что это наш косяк. Выслушиваем мысли от коллег о том, что все плохо организовано. Каемся.
Мудрые мысли от мудрых коллег в чате
1. Резервируйтесь

Мысль отличная, особенно, если знать, что резервировать.

Точек отказа много:
- электричество (резервирование для полного дня конференции это бензогенератор с трубой в окно на Мясницкую)
- интернет входящий от провайдера
- роутер локальный (у нас была версия, что дело в нем)
- титровалка (думали, что она делает нестабильный поток по NDI)
- видеомикшер (поди их порезервируй, учитывая стоимость, аха)
- стример
2. Используйте надежное оборудование. "Вот у меня есть железка такая-то и она хорошо работает. Покупайте наших слонов".

Тут пара мыслей:
а. Мы регулярно тестируем разное железо. На прошлой неделе потестили Aten 9020 и Blackmagic atem mini pro.
и к сожалению для реальных конференций оно вообще не подходит. Приходится использоваться более сложные комбинации.

б. Поэтому мы работаем на Pearl2, который вот уже много времени как не подводил. Мы только в июне провели на нем 19 конференций помимо Infocomm и кучи всяких простых вебинаров.
Резюме
Записи Infocomm уже готовы и обработаны. Претензии, если остались, можно высказывать мне лично.
Несмотря ни на что, мероприятие прошло успешно.