Transmissão de tela usando ffmpeg (muito rápido)

Eu posso usar o ffmpeg para fazer transmissões de tela:

ffmpeg -f x11grab -s 1280x800 -i :0.0 -c:v libx264 -framerate 30 -r 30 -crf 18 out.mkv

No entanto, a saída é muito rápida. Isso também acontece GTK RecordMyDesktopse eu ativar a codificação em tempo real. Portanto, a questão é como obter um ritmo normal de vídeo. Também para capturar o som com ffmpeg, que opção deve ser usada?

Saída FFmpeg:

    ffmpeg -f x11grab -s 1280x800 -r 30 -i :0.0 -c:v libx264 -framerate 30 -r 30 -crf 18 out.mkv
ffmpeg version N-35162-g87244c8 Copyright (c) 2000-2012 the FFmpeg developers
  built on Oct  7 2012 15:56:19 with gcc 4.6 (Ubuntu/Linaro 4.6.3-1ubuntu5)
  configuration: --enable-gpl --enable-libfaac --enable-libfdk-aac --enable-libmp3lame --enable-libopencore-amrnb --enable-libopencore-amrwb --enable-librtmp --enable-libtheora --enable-libvorbis --enable-libvpx --enable-x11grab --enable-libx264 --enable-nonfree --enable-version3
  libavutil      51. 73.102 / 51. 73.102
  libavcodec     54. 64.100 / 54. 64.100
  libavformat    54. 29.105 / 54. 29.105
  libavdevice    54.  3.100 / 54.  3.100
  libavfilter     3. 19.102 /  3. 19.102
  libswscale      2.  1.101 /  2.  1.101
  libswresample   0. 16.100 /  0. 16.100
  libpostproc    52.  1.100 / 52.  1.100
[x11grab @ 0xab896a0] device: :0.0 -> display: :0.0 x: 0 y: 0 width: 1280 height: 800
[x11grab @ 0xab896a0] shared memory extension found
[x11grab @ 0xab896a0] Estimating duration from bitrate, this may be inaccurate
Input #0, x11grab, from ':0.0':
  Duration: N/A, start: 1350136942.608988, bitrate: 983040 kb/s
    Stream #0:0: Video: rawvideo (BGR[0] / 0x524742), bgr0, 1280x800, 983040 kb/s, 30 tbr, 1000k tbn, 30 tbc
[libx264 @ 0xab87320] using cpu capabilities: MMX2 SSE2Fast SSSE3 Cache64 SlowCTZ SlowAtom
[libx264 @ 0xab87320] profile High 4:4:4 Predictive, level 3.2, 4:4:4 8-bit
[libx264 @ 0xab87320] 264 - core 128 r2 198a7ea - H.264/MPEG-4 AVC codec - Copyleft 2003-2012 - http://www.videolan.org/x264.html - options: cabac=1 ref=3 deblock=1:0:0 analyse=0x3:0x113 me=hex subme=7 psy=1 psy_rd=1.00:0.00 mixed_ref=1 me_range=16 chroma_me=1 trellis=1 8x8dct=1 cqm=0 deadzone=21,11 fast_pskip=1 chroma_qp_offset=4 threads=6 lookahead_threads=1 sliced_threads=0 nr=0 decimate=1 interlaced=0 bluray_compat=0 constrained_intra=0 bframes=3 b_pyramid=2 b_adapt=1 b_bias=0 direct=1 weightb=1 open_gop=0 weightp=2 keyint=250 keyint_min=25 scenecut=40 intra_refresh=0 rc_lookahead=40 rc=crf mbtree=1 crf=18.0 qcomp=0.60 qpmin=0 qpmax=69 qpstep=4 ip_ratio=1.40 aq=1:1.00
Output #0, matroska, to 'out.mkv':
  Metadata:
    encoder         : Lavf54.29.105
    Stream #0:0: Video: h264, yuv444p, 1280x800, q=-1--1, 1k tbn, 30 tbc
Stream mapping:
  Stream #0:0 -> #0:0 (rawvideo -> libx264)
Press [q] to stop, [?] for help
frame=   10 fps=0.0 q=0.0 size=       1kB time=00:00:00.00 bitrate=   0.0kbits/sframe=   19 fps= 17 q=0.0 size=       1kB time=00:00:00.00 bitrate=   0.0kbits/sframe=   28 fps= 17 q=0.0 size=       1kB time=00:00:00.00 bitrate=   0.0kbits/sframe=   37 fps= 17 q=0.0 size=       1kB time=00:00:00.00 bitrate=   0.0kbits/sframe=   45 fps= 16 q=0.0 size=       1kB time=00:00:00.00 bitrate=   0.0kbits/sframe=   47 fps= 14 q=0.0 size=       1kB time=00:00:00.00 bitrate=   0.0kbits/sframe=   52 fps= 13 q=24.0 size=     257kB time=00:00:00.00 bitrate=2101632.0kbiframe=   55 fps= 12 q=24.0 size=     257kB time=00:00:00.10 bitrate=20808.2kbitsframe=   59 fps= 11 q=24.0 size=     289kB time=00:00:00.23 bitrate=10145.0kbitsframe=   64 fps= 11 q=24.0 size=     289kB time=00:00:00.40 bitrate=5894.7kbits/frame=   70 fps= 11 q=24.0 size=     289kB time=00:00:00.60 bitrate=3933.1kbits/frame=   72 fps= 10 q=24.0 size=     289kB time=00:00:00.66 bitrate=3549.2kbits/frame=   77 fps=9.8 q=24.0 size=     289kB time=00:00:00.83 bitrate=2837.7kbits/frame=   80 fps=9.6 q=24.0 size=     289kB time=00:00:00.93 bitrate=2533.5kbits/frame=   85 fps=9.3 q=24.0 size=     289kB time=00:00:01.10 bitrate=2146.9kbits/frame=   89 fps=9.3 q=24.0 size=     289kB time=00:00:01.23 bitrate=1917.1kbits/frame=   92 fps=9.1 q=24.0 size=     289kB time=00:00:01.33 bitrate=1773.3kbits/frame=   96 fps=9.0 q=24.0 size=     289kB time=00:00:01.46 bitrate=1612.4kbits/frame=   99 fps=8.8 q=24.0 size=     321kB time=00:00:01.56 bitrate=1676.8kbits/frame=  104 fps=8.7 q=24.0 size=     321kB time=00:00:01.73 bitrate=1515.2kbits/frame=  109 fps=5.3 q=24.0 Lsize=    1093kB time=00:00:03.56 bitrate=2511.5kbits/s    
video:1092kB audio:0kB subtitle:0 global headers:0kB muxing overhead 0.120198%
[libx264 @ 0xab87320] frame I:3     Avg QP:18.93  size:142610
[libx264 @ 0xab87320] frame P:43    Avg QP:20.79  size: 15751
[libx264 @ 0xab87320] frame B:63    Avg QP:23.75  size:   195
[libx264 @ 0xab87320] consecutive B-frames: 21.1%  1.8% 11.0% 66.1%
[libx264 @ 0xab87320] mb I  I16..4: 50.0% 21.1% 28.9%
[libx264 @ 0xab87320] mb P  I16..4:  6.1%  0.9%  3.2%  P16..4:  5.5%  1.2%  0.6%  0.0%  0.0%    skip:82.5%
[libx264 @ 0xab87320] mb B  I16..4:  0.4%  0.1%  0.0%  B16..8:  2.9%  0.1%  0.0%  direct: 0.0%  skip:96.5%  L0:40.7% L1:57.0% BI: 2.3%
[libx264 @ 0xab87320] 8x8 transform intra:14.5% inter:46.1%
[libx264 @ 0xab87320] coded y,u,v intra: 33.5% 24.1% 25.4% inter: 0.9% 0.4% 0.4%
[libx264 @ 0xab87320] i16 v,h,dc,p: 70% 26%  1%  3%
[libx264 @ 0xab87320] i8 v,h,dc,ddl,ddr,vr,hd,vl,hu: 11% 21% 30%  5%  7%  5%  7%  4% 10%
[libx264 @ 0xab87320] i4 v,h,dc,ddl,ddr,vr,hd,vl,hu: 32% 35% 12%  2%  4%  3%  4%  3%  5%
[libx264 @ 0xab87320] Weighted P-Frames: Y:0.0% UV:0.0%
[libx264 @ 0xab87320] ref P L0: 57.0%  5.6% 26.8% 10.6%
[libx264 @ 0xab87320] ref B L0: 69.4% 22.6%  8.0%
[libx264 @ 0xab87320] ref B L1: 93.7%  6.3%
[libx264 @ 0xab87320] kb/s:2460.40

ffmpeg screen-capture video-capture

— rowman
fonte

-f alsa -i pulsevocê deve obter entrada de áudio. Você também pode nos fornecer a saída completa e sem cortes da linha de comando?

— Slhck 13/10/12

Eu vejo que x11grabtem uma -framerateopção . O padrão é NTSC, para que você possa usar -framerate 30e -r 30para a saída em combinação?

— Slhck 13/10/12

@ slhck, obrigado. a postagem é atualizada de acordo com sua sugestão, no entanto, o mesmo problema. Meu computador também não é tão rápido.

— Rowman

@ Slhck, acho que tenho alguma pista do que acontece. Parece que faltam algumas fotos durante a codificação ao mesmo tempo. É por isso que parece mais rápido. Especialmente quando a carga é maior, a taxa de perda de quadros é muito maior e o vídeo simplesmente salta. Existe um método para capturar apenas sem codificação e codificar o vídeo quando a captura for concluída, como feito pelo GTK RecordMyDesktop?

— rowman 13/10/12

Eu acredito que o problema é o primeiro -r 30deste meio "ignorar a data e hora de dados de entrada e tratá-lo como se fosse exatamente 30 fps" tentar "-framerate 30" lá em cima em vez

— rogerdpack

Tente usar um codificador sem perdas para capturar a tela e, em seguida, recodifique a saída quando terminar para criar um arquivo menor, se desejado. A vantagem desse método é geralmente um processo de captura menos intensivo, que pode resultar em uma taxa de quadros de captura "mais rápida". Obviamente, os resultados podem variar.

ffmpeg -f x11grab -s 1280x800 -i :0.0 -c:v libx264 -preset ultrafast -crf 0 out.mkv

É possível que sua CPU simplesmente não tenha a capacidade de codificar na taxa de quadros declarada em um tamanho de captura de tela específico. Nesse caso, você pode tentar um -svalor menor . Pode valer a pena experimentar com outros codificadores sem perdas, como huffyuv, ffv1 ou utvideo, mas eu pessoalmente não os experimentei por screencasts.

Mais informações:

COMO: Screencasting adequado no Linux
Captura de áudio com FFmpeg e ALSA (como alternativa ao pulso)

— llogan
fonte

Parece que os outros codecs sem perdas que você mencionou consomem menos recursos em comparação com o x264. Irá comentar com mais precisão sobre isso mais tarde.

— rowman 14/10/12

@rowman Quase todo codificador consome menos recursos do que o x264 (ou geralmente, os codificadores h.264), que é simplesmente uma questão de qualidade versus o tempo necessário para codificar. É por isso que muitos usuários ainda aderem ao XviD ou similar quando se trata de codificação em tempo real.

— slhck

| @slhck Bom argumento. O contêiner também tem algum efeito sobre os recursos? e Existe alguma literatura sobre a comparação de diferentes codecs de vídeo sem perda em termos de recursos? Quase todos eles afirmam ser o mais rápido.

— rowman 14/10/12

@rowman Você tentou meu exemplo? O uso do x264 para criar uma saída sem perdas deve fornecer um desempenho semelhante ao dos outros codificadores listados. Talvez um pouco mais devagar; talvez um pouco mais rápido, mas imagino que as diferenças não devam ser consideráveis.

— Llogan

@LordNeckbeard, sim eu fiz. O x264 no seu exemplo tem uma sobrecarga de 60 a 70% no meu processador enquanto o huffyuv, utvideo, ffv1 tem 25 a 35% em média. Eu tenho um átomo de sólido da Intel;)

— Rowman