Автономия стримера¶
Central — управляющий контур, а не путь медиа. Стример самостоятельно выполняет обработку и раздачу видео: забирает источник, транскодирует, пишет архив, отдаёт поток. Поэтому отказ central — авария управления, а не эфира. Эта страница — что именно продолжает работать, что недоступно и как восстанавливается связь с central.
Здесь рассматривается случай, когда стримеру недоступен ни один central. Отказ одного инстанса при работающих остальных описан в резервировании.
Что продолжает работать¶
- Эфир. Стримы на стримерах вещают дальше: всё, что стрим делает на своей машине, — источники, транскодер, запись архива, пуши, раздача — от central не зависит. Просмотр непосредственно со стримера продолжается.
- Запись DVR. Архив пишется без пауз — окно продолжает расти всё время простоя central.
- Даже рестарт стримера. Стример, перезапущенный при недоступном central, поднимает свои стримы немедленно — тёплым стартом из локального кэша среза конфигурации, не дожидаясь ни одного ответа central. Он просто продолжает повторять синхронизацию:
WARN sync failed, retrying error sending request for url (.../node-api-v4/sync)
Что недоступно¶
- Управление. Консоль, API, список стримов, статистика, сессии — весь контур central. Изменения конфигурации не доставляются, лейаутер ничего не переразмещает: стримеры работают по последней конфигурации.
- Просмотр через central. Проксирование медиа и выдача редиректов идут через central — новые запросы к его адресу остаются без ответа. Отсюда правило настройки: задавайте стримерам публичный адрес медиа — тогда central нужен для начального перенаправления, а установленное подключение к стримеру сохраняется при отказе central. В Кластер → Стримеры откройте настройки стримера, раздел Подключение, задайте Публичный адрес медиа и сохраните изменения.
- Локальный стример. Стример внутри процесса central останавливается вместе с ним: стримы, размещённые на нём, останавливаются вместе с процессом. Ещё один довод разносить central и вещание по разным машинам в рабочей установке.
Как восстанавливается связь с central¶
Стример повторяет синхронизацию с экспоненциальной паузой (потолок — около минуты), поэтому после возвращения central связь восстанавливается автоматически в пределах этой паузы: в реестре стример проходит путь от «Потеря сигнала» до «В эфире», статистика и сессии снова доступны. Ничего перезапускать не нужно.
Два особых случая возвращения central:
- Central восстановлен из бэкапа, и версии конфигурации в нём старше, чем стример успел применить. Стример получает от central явный сигнал, забирает полный срез конфигурации как истину и продолжает работать по нему. Откат версий кластер не рвёт.
- Central вернулся с пустой базой — диск потерян, бэкапа нет. Стример оказывается для него незнакомцем, и его лог говорит об этом прямо:
ERROR node key rejected; streams keep running from the applied slice, operator action required
Эфир при этом продолжается — стример работает по применённому срезу. Чтобы вернуть его в кластер: остановите сервис стримера на машине, очистите её каталог состояния (по умолчанию /var/lib/optic — идентичность стримера хранится там; архив, лежащий отдельным диском, не трогайте), откройте окно присоединения и присоедините машину новым токеном. Стример придёт в реестр новой записью, и лейаутер разместит стримы заново. Новый токен не заменяет сохранённую идентичность: нужен сброс состояния.
Чем обеспечена автономия¶
Автономную работу обеспечивают следующие свойства:
- Всю связь инициирует стример. Обратного управляющего стрима у central нет: стримеру central нужен, чтобы менять конфигурацию, а не чтобы работать.
- Применённый срез хранится на стримере. Локальный кэш конфигурации — то, что даёт тёплый старт без central и работу по последней конфигурации при длительной недоступности central.
- Конфигурация и реестры группы хранятся в PostgreSQL. Их восстанавливают из дампа. Настройки серверов и каталоги состояния central сохраняют отдельно — см. Бэкап и восстановление.