Wie viele Instanzen von FFmpeg-Befehlen kann ich parallel ausführen?

Ich habe es satt, 8 Befehle gleichzeitig auszuführen, um die CPU voll auszunutzen und die Videokonvertierungen zu beschleunigen.

ffmpeg -i input.mp4 -t 60 -f mp4 /mnt/a.mp4 > /dev/null 2>&1 &
ffmpeg -i input.mp4 -t 60 -f mp4 /mnt/b.mp4 > /dev/null 2>&1 &
ffmpeg -i input.mp4 -t 60 -f mp4 /mnt/c.mp4 > /dev/null 2>&1  &
ffmpeg -i input.mp4 -t 60 -f mp4 /mnt/d.mp4 > /dev/null 2>&1 &
ffmpeg -i input.mp4 -t 60 -f mp4 /mnt/e.mp4 > /dev/null 2>&1 &
ffmpeg -i input.mp4 -t 60 -f mp4 /mnt/f.mp4 > /dev/null 2>&1 &
ffmpeg -i input.mp4 -t 60  -f mp4 /mnt/g.mp4 > /dev/null 2>&1 &
ffmpeg -i input.mp4 -t 60 -f mp4  /mnt/h.mp4 > /dev/null 2>&1 &

2 bis 3 von ihnen werden gestoppt. Warum passiert das? Ist das eine FFmpeg-Einschränkung? Ich habe dies auf 16-Kern- und 4-Kern-Maschinen versucht, EC2 c1.xlarge und cc2.8xlarge. Gleiches Verhalten. Ich habe komplizierte und einfache Befehle ausprobiert, trotzdem werden 2 oder 3 gestoppt.

ffmpeg multi-core multi-processor

— d33pika
quelle

Meines Wissens sollte nichts in FFmpeg selbst Sie daran hindern. Könnte ein Shell-Problem sein?

— Slhck

Was ist, wenn ich für jeden Befehl unterschiedliche Eingaben habe? Wie kann ich sie unabhängig machen, denn wenn man aufhört, hören sie alle auf.

— Samson

Haben Sie Parameter für die Verwendung von Multiprozessoren gefunden ?!

— Dr.jacky

was meinst du hier mit "stehen bleiben"? Bash zeigt sie als angehalten?

— Rogerdpack

Antworten:

Bei der Beantwortung der ursprünglichen Frage, warum einige Jobs angehalten werden, ist ffmpeg in der Befehlszeile interaktiv. Es liest ständig Eingaben auf der Kommandozeile. Damit Sie alle im Hintergrund ausführen können, sollten Sie Folgendes ändern:

ffmpeg -i input.mp4 -t 60 -f mp4 /mnt/a.mp4 > /dev/null 2>&1 &

dazu:

ffmpeg -i input.mp4 -t 60 -f mp4 /mnt/a.mp4 </dev/null > /dev/null 2>&1 &

Durch Hinzufügen von </dev/nullwird ffmpeg angewiesen, nicht nach Eingaben zu suchen, und alle Ihre Jobs sollten im Hintergrund ausgeführt werden.

— DingoNV
quelle

Was ist das: 2> & 1

— Dr.jacky

Vielen Dank! Ich hatte genau das gleiche Problem und das funktionierte wie ein Zauber, bitte akzeptieren Sie!

— fr_andres SupportsMonicaCellio

@ Mr.Hyde Spät zu der Party, die ich kenne, aber 2> & 1 teilt dem Fehlerstrom mit, dass er an die gleiche Stelle wie der dicke Stream gehen soll - also / dev / null. Es ist eine Abkürzung für > /dev/null 2>/dev/null.

— Berry120

Nur ein Gedanke zu Ihrem Befehl: Eine viel einfachere Möglichkeit, die Maschine mit einem einzigen Befehl zu hämmern, besteht darin, alles in einer einzigen Zeile zusammenzufassen:

ffmpeg -i input.mp4 -t 60 -f mp4 /mnt/a.mp4 \
 -f mp4 /mnt/b.mp4 \
 -f mp4 /mnt/c.mp4 \
 -f mp4 /mnt/d.mp4 \
 -f mp4 /mnt/e.mp4 \
 -f mp4 /mnt/f.mp4 \
 -f mp4 /mnt/g.mp4 \
 -f mp4  /mnt/h.mp4 > /dev/null 2>&1

Möglicherweise möchten Sie (abhängig von Ihrer ffmpeg-Version) ein Flag hinzufügen, um den Server anzuweisen, alle verfügbaren Prozessoren zu verwenden

-threads 0

Als Referenz: http://ffmpeg.org/trac/ffmpeg/wiki/Creating%20multiple%20outputs

— NublaII
quelle

Ich habe dies versucht, es nutzt nicht alle Prozessoren effizient. Die Last bleibt bei 20-30%, die Hyper-Threads werden überhaupt nicht genutzt.

— d33pika

Vielleicht hat es etwas mit EC2-Maschinen zu tun? Ich führe gerade den obigen Befehl auf einem 16-xeon-Core-Rechner mit 16 Ausgängen aus und das bekomme ich: htop

— screenshot

Bist du auf der neuesten Version von FFmpeg?

— d33pika

@NublaII Was ist> / dev / null 2> & 1!?

— Dr.jacky

@ Mr.Hyde Es verbirgt die Standardausgabe von Ihnen und zeigt Ihnen Fehlerausgaben. Lies dies: xaprb.com/blog/2006/06/06/what-does-devnull-21-mean

— Yuri Sucupira