Кодирование нескольких видеопотоков с помощью одного вызова avconv

Question

Я играл с avconv в Ubuntu и теперь могу, например, записывать рабочий стол со звуком из звуковой карты. Одна вещь, которую я хотел сделать, - это запись двух видеовходов одновременно, например, с рабочего стола и с веб-камеры. Я думал о том, чтобы сделать что-то вроде этого:

avconv \
  -f alsa \
  -i default \
  -acodec flac \
  -f video4linux2 \
  -r 6 \
  -i /dev/video0 \
  -f x11grab \
  -i :0.0 \
  out.mkv

Я думал, что если вы определите несколько видеовходов, а формат .mkv может обрабатывать несколько видеопотоков, avconv закодирует 2 видеопотока и 1 аудиопоток в один файл. Но это не то, что происходит:

avconv version 0.8.4-6:0.8.4-0ubuntu0.12.10.1, Copyright (c) 2000-2012 the Libav developers
  built on Nov  6 2012 16:51:11 with gcc 4.7.2
[alsa @ 0x1091bc0] capture with some ALSA plugins, especially dsnoop, may hang.
[alsa @ 0x1091bc0] Estimating duration from bitrate, this may be inaccurate
Input #0, alsa, from 'default':
  Duration: N/A, start: 1354364317.020350, bitrate: N/A
    Stream #0.0: Audio: pcm_s16le, 48000 Hz, 2 channels, s16, 1536 kb/s
[video4linux2 @ 0x10923e0] Estimating duration from bitrate, this may be inaccurate
Input #1, video4linux2, from '/dev/video0':
  Duration: N/A, start: 100607.724745, bitrate: 29491 kb/s
    Stream #1.0: Video: rawvideo, yuyv422, 640x480, 29491 kb/s, 6 tbr, 1000k tbn, 6 tbc
[x11grab @ 0x107b2a0] device: :0.0+83,87 -> display: :0.0 x: 83 y: 87 width: 854 height: 480
[x11grab @ 0x107b2a0] shared memory extension  found
[x11grab @ 0x107b2a0] Estimating duration from bitrate, this may be inaccurate
Input #2, x11grab, from ':0.0+83,87':
  Duration: N/A, start: 1354364318.488382, bitrate: 196761 kb/s
    Stream #2.0: Video: rawvideo, bgra, 854x480, 196761 kb/s, 15 tbr, 1000k tbn, 15 tbc
Incompatible pixel format 'bgra' for codec 'mpeg4', auto-selecting format 'yuv420p'
[buffer @ 0x107fcc0] w:854 h:480 pixfmt:bgra
[avsink @ 0x10bdf00] auto-inserting filter 'auto-inserted scaler 0' between the filter 'src' and the filter 'out'
[scale @ 0x10dc680] w:854 h:480 fmt:bgra -> w:854 h:480 fmt:yuv420p flags:0x4
Output #0, matroska, to '.../out.mkv':
  Metadata:
    encoder         : Lavf53.21.0
    Stream #0.0: Video: mpeg4, yuv420p, 854x480, q=2-31, 4000 kb/s, 1k tbn, 15 tbc
    Stream #0.1: Audio: libvorbis, 48000 Hz, 2 channels, s16
Stream mapping:
  Stream #2:0 -> #0:0 (rawvideo -> mpeg4)
  Stream #0:0 -> #0:1 (pcm_s16le -> libvorbis)
Press ctrl-c to stop encoding
[mpeg4 @ 0x10bd800] rc buffer underflow
^Cframe=  160 fps= 15 q=2.0 Lsize=    3414kB time=10.66 bitrate=2623.0kbits/s    
video:3273kB audio:131kB global headers:4kB muxing overhead 0.165600%
Received signal 2: terminating.

Я не уверен, что это вопрос отображения (некоторые опции -map добавить?) или что avconv просто не может кодировать более 1 видеопотока одновременно. Так это фактическое ограничение avconv или ограничение доступных контейнеров, или я просто не могу найти правильную комбинацию параметров командной строки?

Answer 1

Не стоит смешивать параметры ввода и вывода. Надеюсь, вы заметите, что avconv конвертирует ваше аудио в Vorbis, а не FLAC - это потому, что он думает, что вы пытаетесь установить его в качестве аудиокодека вашего устройства video4linux, и игнорирует его как недопустимый параметр. Вам также лучше всего использовать x264 в качестве видеокодера. Поскольку вы используете Ubuntu, IIRC, вы должны иметь его как часть Ubuntu-Restricted-Extras.

avconv -f alsa -i default -f video4linux2 -r 6 -i /dev/video0 -f x11grab -i 0:0 \
-map 1 -map 2 -map 0 \
-c:a flac -c:v libx264 -crf 23 -preset veryfast output.mkv

По умолчанию avconv выбирает для вывода только один видеопоток и один аудиопоток (и один поток субтитров, если он там есть). -map 1 -map 2 -map 0 говорит ему брать каждый поток из первых трех входов (он начинает отсчет с 0).

Это не имеет прямого отношения к этому (поскольку каждый из ваших входов будет содержать только один поток), но вы также можете выбрать отдельные потоки из входов с помощью -map: -map 0:1 отобразит второй поток из первого аудио, -map 1:a отобразит каждый аудиопоток со второго входа, -map 2:v:1 отобразит второй видеопоток с третьего входа, а -map 3:s отобразит все субтитры с четвертого входа.

Порядок, в котором вы используете флаги -map имеет значение; в приведенном выше примере я сделал так, чтобы аудио вход отображался третьим, помещая этот -map последним.

Если у вас есть проблемы с замедлением записи экрана на x264 (это не должно происходить, если у вас нет устаревшего компьютера), вы можете попробовать изменить -preset на сверхбыстрый или сверхбыстрый, оба из которых дадут вам более быструю / меньшую нагрузку на процессор. интенсивное кодирование Если это не сработает, вы можете попробовать использовать -c:v huffyuv - это видеокодек без потерь, видео эквивалент FLAC, и он даст вам поистине смехотворные размеры файлов; но вы можете перекодировать в менее болезненно большой кодек позже.