GNU Parallel des armen Mannes in ksh implementiert?

Ich möchte die Funktion von GNU parallel verwenden, mit der der Befehl und die Liste, die parallel eingegeben werden, ausgeführt und nach Abschluss des Vorgangs ausgespuckt werden können. Ich möchte GNU jedoch nicht parallel auf allen unseren Servern installieren.

Oder vielleicht eine parallele Version von xargs?

Gibt es eine ksh-Implementierung dessen, was GNU Parallel tut? In diesem Fall muss dies nicht wie bei GNU Parallel erfolgen - solange der gesamte Ausgang weitergeleitet oder gespeichert werden kann. Ich möchte auch die Verwendung temporärer Dateien vermeiden.

Wenn Sie auf einer Maschine mit mehreren Kernen parallelisieren möchten, können Sie einfach (GNU) verwenden xargs, z.

echo seq_[0-9][0-9].gz | xargs -n 1 -P 16 ./crunching

Bedeutung: xargsStartet bis zu 16 Prozesse parallel zur ./crunchingVerwendung von 1 Token von stdin für jeden Prozess.

Sie können auch splitin Kombination mit xargs verwenden.

Oder Sie können ein einfaches Makefile für die Jobausführung erstellen und aufrufen make -f mymf -j $CORES(für diese Lösung benötigen Sie temporäre Dateien).

PS: Das GNU-Parallelhandbuch enthält auch einige Vergleiche mit anderen Tools, einschließlich xargs und make . Interessanterweise schreiben sie:

(Sehr frühe Versionen von GNU parallel wurden zufällig mit make -j implementiert).

Sehen Sie sich an, parallel --embedwelche GNU Parallel in dasselbe Shell-Skript eingebettet sind, aus dem Sie es verwenden.

parallel --embed > new_script

Bearbeiten Sie dann new_script.