Si un processus enfant généré échoue, tuez tout et quittez

Dans mon script, je divise un ensemble de données en input_aa, input_ab, etc. Ensuite, je les exécute à travers le même script Python, en tant que tel:

# Execute program on each split file
for part in input_*; do
        python3 $part &
done
wait

Ma question est double: comment puis-je détecter qu'un processus Python a échoué, et lorsqu'il est détecté, comment puis-je tuer tous les enfants générés et quitter le script avec un échec?

Vous pouvez utiliser un groupe de processus:

set -m
(
   for part in input_*; do
     (python3 "$part" || kill 0) &
   done
   wait
)

set -m(et fonction shell POSIX facultative, fonctionnalité shell Unix requise) exécute les travaux dans leur propre groupe de processus. Dans bash, yash, zsh, mksh, c'est des emplois du sous - shell où set -mest activée si l'extérieur (...)et tous les processus créés dans ce seront placés dans le même groupe de processus.

Pour dashet d'autres ashshells basés, cela ne fonctionne qu'au niveau du processus de shell de niveau supérieur. Donc, ce code fonctionnera à moins qu'il ne soit placé dans un sous-shell.

Cela ne fonctionnera pas du tout dans AT&T kshou l'ancien shell SysV / Bourne.

kill 0 envoie un signal SIGTERM à tous les membres du groupe de processus en cours.

Ceci est un exemple. JOUER avec ce premier pour obtenir exactement ce dont vous avez besoin. Il ne peut pas beaucoup se casser tel quel.

#!/bin/bash
# Example of killing off all children

> killfile
> outfile.err
kill_em()
{
   echo 'killing all children ' > 2
   while read pid
   do
      kill -0 $pid && kill -9 $pid  # if still running kill it
   done < killfile
   exit 1
}

export grandparentpid=$$
trap 'kill_em' 6
for i in 2 2 3 4 5 6 7 8 9 10
do
        ( sleep $i && ls oinkle  >> outfile 2>> outfile.err &
          pid=$!
          echo $pid >> killfile
          wait $!
          [ $? -ne 0 ] && kill -6 $grandparentpid
        ) &
done
wait

Ceci est configuré pour échouer délibérément car ls oinkleéchouera (sur ma machine).

Lorsque vous obtenez ce dont vous avez besoin après avoir bricolé avec le script de démarrage --- Changement:

for i in 2 2 3 4 5 6 7 8 9 10

à:

for part in input_* 

changement:

sleep $i && ls oinkle 

à:

python3 $part 

Les redirections sont là pour enregistrer les journaux. Vous n'en voudrez peut-être pas.