Jak powstrzymać xargs przed złym łączeniem danych wyjściowych z wielu procesów?

Używam xargsz opcją --max-args=0(alternatywnie -P 0).

Jednak wyniki procesów są scalane ze stdoutstrumieniem bez uwzględnienia właściwego rozdzielenia linii. Więc często kończę liniami takimi jak:

<start-of-line-1><line-2><end-of-line-1>

Ponieważ używam egrepz ^moim wzorem na całej xargswyjście to jest brudząc się mój wynik.

Czy jest jakiś sposób na wymuszenie xargszapisu wyników procesu w dowolnej kolejności (w dowolnej kolejności, o ile wynik jednego procesu jest ciągły)?

Lub jakieś inne rozwiązanie?

Edycja: więcej szczegółów na temat przypadku użycia:

Chcę pobierać i analizować strony internetowe z różnych hostów. Ponieważ ładowanie każdej strony zajmuje około sekundy, a istnieje kilkadziesiąt stron, chcę zrównoważyć żądania.

Moje polecenie ma następującą postać:

echo -n $IPs | xargs --max-args=1 -I {} --delimiter ' ' --max-procs=0 \
wget -q -O- http://{}/somepage.html | egrep --count '^string'

Używam bash, a nie czegoś takiego jak Perl, ponieważ adresy IP hosta (zmienna $ IPs) i niektóre inne dane pochodzą z dołączonego pliku bash.

To powinno załatwić sprawę:

echo -n $IPs | xargs --max-args=1 -I {} --delimiter ' ' --max-procs=0 \
  sh -c "wget -q -O- 'http://{}/somepage.html' | egrep --count '^string'" | \
  { NUM=0; while read i; do NUM=$(($NUM + $i)); done; echo $NUM; }

Chodzi o to, aby osobno policzyć i zsumować je na końcu. Może się nie powieść, jeśli osobne liczby są wystarczająco duże, aby je pomieszać, ale nie powinno tak być.

GNU Parallel jest specjalnie zaprojektowany, aby rozwiązać ten problem:

echo -n $IPs | parallel -d ' ' -j0 wget -q -O- http://{}/somepage.html | egrep --count '^string'

Jeśli twoje adresy IP znajdują się w pliku, jest jeszcze ładniejsze:

cat IPs | parallel -j0 wget -q -O- http://{}/somepage.html | egrep --count '^string'

Aby dowiedzieć się więcej, obejrzyj wideo wprowadzające: http://www.youtube.com/watch?v=OpaiGYxkSuQ