Тест FFmpeg

Использование FFmpeg для записи, кодирования и трансляции видео. Затем его использование для приема и отображения видео.

План

1. H264 -> RTMP трансляция
2. AAC -> RTMP трансляция
3. Воспроизведение с помощью FFmpeg

Устройства

Необходимо использовать DShow для получения, временно не реализовано, используется устройство с фиксированным именем.

Захват

Видео

Любой формат -> H264 Основные параметры контролируют FPS и битрейт для снижения пропускной способности. ok

Аудио

PCM -> AAC 1 канал 16000 Гц 8 бит // 44100 Гц, 16 бит В конечном итоге FFmpeg поддерживает только формат AAC с использованием FLT, временно используется так. В процессе кодирования необходимо учитывать проблему FIFO. Временно сохранено.

Преобразование

В процессе необходимо преобразовать видео в формат RGB24 и вывести его через обратный вызов функции для удобства реального времени захвата RAW данных.

Сохранение

Сначала необходимо завершить трансляцию RTMP. Затем рассмотреть возможность сохранения в виде файла, RTSP и других популярных форматов.

Воспроизведение

Минимизация задержки---------------------------

Прогресс

2017-10-17 21:22:44

Отдельная трансляция аудио и видео работает без проблем, но при объединении аудио практически не воспроизводится. Предполагается, что это связано с длительностью кодирования и декодирования.

1. В будущем необходимо выделить кодирование и декодирование аудио и видео в отдельные процессы и запустить их в отдельных потоках.
2. Всегда использовать библиотеки FFmpeg для удобства будущей переносимости и кросс-платформенности.