Задание 1. Стриминг

1. Возьмите любой видеофайл со звуком. Отправьте его в RTMP потоке в любой стриминговый сервис (Youtube, VK, Facebook,...).
2. Сделайте то же самое, используя на входе поток RTSP с одной из камер в МИЭМ. Посчитайте задержку и опишите, как вы установили время задержки, обоснуйте точность измерения.
3. Рассмотрите вариант трансляции из RTSP в RTMP без перекодирования медиапотока, ограничьтесь только сменой контейнера. Подберите параметры, при которых в трансляции не будет брака (залипаний, подрывов и других артефактов). Опишите возникающие ошибки и способы их устранения.
4. Теперь, когда вы потренировались у себя на компьютере, повторите все это на предоставленном вам сервере. Доступ к серверу у вас есть, надеюсь, вы уже убедились, что всё работает.

Обратите внимание

• Результаты своей работы в отчете вам следует показывать с сервера (выполнение команд -- на сервере, поток -- с локального компьютера).
• При тестировании важно, чтобы в кадре было движение. Вы можете выбрать время, когда в лаборатории есть люди и они что-то делают в кадре или задать движение камере, с которой ведете трансляцию. Именно на движении видно, насколько стабильно работает поток.
• На стабильность потока от камеры влияют настройки стриминга в камере. Убедитесь, что они адекватные вашим задачам и возможностям.
• Не записывайте видео, не убедившись, что ваш канал связи не вносит заметных проблем в доставку потоков. То, что "в дубках интернет не ловит" -- ваше жизненное обстоятельство и никак не извиняет огрехов в отчетном видео. В МИЭМе, например, ловит. Пишите там.

Задание 2. Мультиэкранный стриминг

1. Сделайте композицию из двух источников -- RTSP потоков с двух видеокамер. Обратите внимание на синхронность этих потоков. Не забудьте о звуке. Опишите, как вы оценивали синхронизацию и что делали для ее достижения.
2. Вместо одной из камер поставьте видеопоток с кодера. Таблица с устройствами в сети лежит на странице Ресурсы. Вы можете выбрать компоновку "два экрана рядом", можете сделать "картинку в картинке" с частичным наложением изображения с камеры на изображение с кодера. Убедитесь, что звук в этой композиции приходит с обоих источников и смешивается.
3. Результат демонстрируйте с выделенного вам сервера.

В отчете:

• Опишите ситуацию с синхронностью этих двух потоков.
• Как вы установили значение рассинхронизации?
• Потребовалось ли вам предпринимать какие-нибудь действия, чтобы восстановить синхронизацию?
• Получилось ли это сделать?

4. Полученный поток отправьте этот поток на Youtube, пошарьте по ссылке.

Отразите все перечисленные задачи и вопросы в вашем отчете.

Задание 3. Отображение дополнительной информации

• Разработать программу визуализации аудио- и видеопотока из входного потока
• Визуализация звука должна быть синхронной с видео.
• Видеопоток представить в волновом виде.
• Задача может выполняться при помощи ffmpeg. А можете использовать другие средства.
• Демонстрировать программу предполагается с локального компьютера. Если вы сделали веб-версию, то выигрышнее продемонстрировать вариант с серверным размещением.

Примеры

• Примеры
• Еще примеры
• Пример с разными вариантами сразу
• Пример линейным peak meter

Шаг 1. Отображение дополнительной информации о видео и звуке

Шаг 2. Сборка в один поток

1. Собрать результаты двух задач в один выходной поток (исходное, волновое представление, индикатор уровня звука).
2. На свободное место добавить текст с адресом входного потока (текстом, не растром)
3. Отправить полученную композицию в RTMP поток на Youtube.

Задание 4. Захват рабочего стола через NDI

Протокол NDI с недавних пор используется в "большом" телевидении и позволяет работать с совместимыми камерами и программным обеспечением. Совместимых камер у нас нет (и потоки там слишком большие для удаленной работы), зато в пределах локальной сети (не wi-fi!) он прекрасно подходит для захвата экрана компьютера. В этом задании вам потребуется сделать захват собственного экрана (можете использовать экран другого компьютера, но не обязательно) и отправить полученный поток с помощью ffmpeg на Youtube.

1. Установите Newtek NDI SDK

2. Скачайте Newtek SDI Tools

3. Сконфигурируйте FFMPEG

4. Проведите трансляцию (со звуком) на Youtube, в ней расскажите, как вы выполняли эту работу, сосредоточившись на конфигурировании FFMPEG и работе с NDI и возможностях NDI применительно к FFMPEG.

Изучите возможности NDI Tools и SDK, расскажите о них в скринкасте. Этот рассказ будет частью вашего отчета. Не надо повторять содержание сайта производителя, описывайте свой опыт изучения этих инструментов.

Результат

1. Результат выполнения всех заданий этой работы нужно оформить в виде Google-документа с примерами кода, открыть доступ по ссылке на чтение и на редактирование на d.korolev@gmail.com;
2. Записать скринкаст о проделанной работе по каждому заданию отдельно. Спланируйте выступление, можете использовать монтаж для большей динамичности. Это должен быть понятный бегло знакомому с ffmpeg человеку рассказ, поясняющий не только, что вы сделали, но и как побороли возникшие проблемы, какие есть возможности у используемых инструментов (если вы вдруг эти возможности не использовали и не можете показать наглядно), почему выбрали тот или иной вариант при наличии вариантов реализации.
3. Отправьте результаты в форму. У вас должно получиться четыре ссылки на скринкаст и одна ссылка на гуглодокумент.

Проверка будет пиринговой + экспертной.

Результаты этой работы подлежат защите в конце курса.