Wywoływanie funkcji powłoki za pomocą xargs

Próbuję użyć xargs do równoległego wywołania bardziej złożonej funkcji.

#!/bin/bash
echo_var(){
    echo $1
    return 0
}
seq -f "n%04g" 1 100 |xargs -n 1 -P 10 -i echo_var {} 
exit 0

To zwraca błąd

xargs: echo_var: No such file or directory

Wszelkie pomysły, jak mogę użyć xargs, aby to osiągnąć, lub jakiekolwiek inne rozwiązania byłyby mile widziane.

Eksport funkcji powinien to zrobić (nieprzetestowany):

export -f echo_var
seq -f "n%04g" 1 100 | xargs -n 1 -P 10 -I {} bash -c 'echo_var "$@"' _ {}

Możesz użyć wbudowanego printfzamiast zewnętrznego seq:

printf "n%04g\n" {1..100} | xargs -n 1 -P 10 -I {} bash -c 'echo_var "$@"' _ {}

Ponadto użycie return 0i w exit 0ten sposób maskuje wszelkie wartości błędu, które mogą zostać wygenerowane przez poprzedzające je polecenie. Ponadto, jeśli nie ma błędu, jest to ustawienie domyślne, a zatem nieco zbędne.

@phobic wspomina, że ​​polecenie Bash można uprościć do

bash -c 'echo_var "{}"'

przenosząc {}bezpośrednio w nim. Ale jest podatny na wstrzyknięcie poleceń, jak wskazał @Sasha.

Oto przykład, dlaczego nie należy używać osadzonego formatu:

$ echo '$(date)' | xargs -I {} bash -c 'echo_var "{}"'
Sun Aug 18 11:56:45 CDT 2019

Inny przykład, dlaczego nie :

echo '\"; date\"' | xargs -I {} bash -c 'echo_var "{}"'

Oto, co jest wyprowadzane przy użyciu bezpiecznego formatu :

$ echo '$(date)' | xargs -I {} bash -c 'echo_var "$@"' _ {}
$(date)

Jest to porównywalne do używania sparametryzowanych zapytań SQL w celu uniknięcia wstrzyknięcia .

Używam datetutaj zastępowania poleceń lub cudzysłowów zamiast rmpolecenia używanego w komentarzu Sashy, ponieważ jest ono nieniszczące.

Używanie GNU Parallel wygląda następująco:

#!/bin/bash
echo_var(){
    echo $1
    return 0
}
export -f echo_var
seq -f "n%04g" 1 100 | parallel -P 10 echo_var {} 
exit 0

Jeśli używasz wersji 20170822, nie musisz tego nawet robić, o export -file uruchomiłeś to:

. `which env_parallel.bash`
seq -f "n%04g" 1 100 | env_parallel -P 10 echo_var {} 

Coś takiego powinno też działać:

function testing() { sleep $1 ; }
echo {1..10} | xargs -n 1 | xargs -I@ -P4 bash -c "$(declare -f testing) ; testing @ ; echo @ "

Może to zła praktyka, ale jeśli definiujesz funkcje w .bashrcskrypcie lub innym, możesz opakować plik lub przynajmniej definicje funkcji za pomocą ustawienia allexport:

set -o allexport

function funcy_town {
  echo 'this is a function'
}
function func_rock {
  echo 'this is a function, but different'
}
function cyber_func {
  echo 'this function does important things'
}
function the_man_from_funcle {
  echo 'not gonna lie'
}
function funcle_wiggly {
  echo 'at this point I\'m doing it for the funny names'
}
function extreme_function {
  echo 'goodbye'
}

set +o allexport