Shell-Funktionen mit xargs aufrufen

Ich versuche, xargs zu verwenden, um eine komplexere Funktion parallel aufzurufen.

#!/bin/bash
echo_var(){
    echo $1
    return 0
}
seq -f "n%04g" 1 100 |xargs -n 1 -P 10 -i echo_var {} 
exit 0

Dies gibt den Fehler zurück

xargs: echo_var: No such file or directory

Ideen, wie ich xargs verwenden kann, um dies zu erreichen, oder andere Lösungen, wären willkommen.

Das Exportieren der Funktion sollte dies tun (ungetestet):

export -f echo_var
seq -f "n%04g" 1 100 | xargs -n 1 -P 10 -I {} bash -c 'echo_var "$@"' _ {}

Sie können das eingebaute printfanstelle des externen verwenden seq:

printf "n%04g\n" {1..100} | xargs -n 1 -P 10 -I {} bash -c 'echo_var "$@"' _ {}

Durch die Verwendung von return 0und auf exit 0diese Weise wird auch jeder Fehlerwert maskiert, der möglicherweise durch den vorhergehenden Befehl erzeugt wird. Wenn es keinen Fehler gibt, ist dies die Standardeinstellung und daher etwas redundant.

@phobic erwähnt, dass der Bash-Befehl vereinfacht werden könnte

bash -c 'echo_var "{}"'

Bewegen Sie das {}direkt hinein. Es ist jedoch anfällig für Befehlsinjektionen, wie von @Sasha hervorgehoben.

Hier ist ein Beispiel, warum Sie das eingebettete Format nicht verwenden sollten :

$ echo '$(date)' | xargs -I {} bash -c 'echo_var "{}"'
Sun Aug 18 11:56:45 CDT 2019

Ein weiteres Beispiel dafür, warum nicht :

echo '\"; date\"' | xargs -I {} bash -c 'echo_var "{}"'

Dies wird im sicheren Format ausgegeben :

$ echo '$(date)' | xargs -I {} bash -c 'echo_var "$@"' _ {}
$(date)

Dies ist vergleichbar mit der Verwendung parametrisierter SQL- Abfragen , um eine Injektion zu vermeiden .

Ich verwende hier dateeine Befehlsersetzung oder in Anführungszeichen anstelle des rmBefehls, der in Sashas Kommentar verwendet wird, da er nicht destruktiv ist.

Die Verwendung von GNU Parallel sieht folgendermaßen aus:

#!/bin/bash
echo_var(){
    echo $1
    return 0
}
export -f echo_var
seq -f "n%04g" 1 100 | parallel -P 10 echo_var {} 
exit 0

Wenn Sie die Version 20170822 verwenden, müssen Sie dies nicht einmal tun, solange Sie Folgendes ausgeführt export -fhaben:

. `which env_parallel.bash`
seq -f "n%04g" 1 100 | env_parallel -P 10 echo_var {} 

So etwas sollte auch funktionieren:

function testing() { sleep $1 ; }
echo {1..10} | xargs -n 1 | xargs -I@ -P4 bash -c "$(declare -f testing) ; testing @ ; echo @ "

Möglicherweise ist dies eine schlechte Vorgehensweise, aber wenn Sie Funktionen in einem .bashrcoder einem anderen Skript definieren, können Sie die Datei oder zumindest die Funktionsdefinitionen mit der Einstellung allexport:

set -o allexport

function funcy_town {
  echo 'this is a function'
}
function func_rock {
  echo 'this is a function, but different'
}
function cyber_func {
  echo 'this function does important things'
}
function the_man_from_funcle {
  echo 'not gonna lie'
}
function funcle_wiggly {
  echo 'at this point I\'m doing it for the funny names'
}
function extreme_function {
  echo 'goodbye'
}

set +o allexport