分类导航

Linux 发布时间：2022-05-08 发布网站：大佬教程 code.js-code.com

大佬教程收集整理的这篇文章主要介绍了linux – bash脚本在后台运行一定数量的作业，大佬教程大佬觉得挺不错的，现在分享给大家，也给大家做个参考。

我需要一个bash脚本在后台运行一些作业,一次三个作业.

我知道可以通过以下方式做到这一点,为了说明,我假设工作的数量是6：

./j1 &
./j2 &
./j3 &
wait
./j4 &
./j5 &
./j6 &
wait

但是,通过这种方式,例如,如果j2运行j1和j3需要更长的时间,那么,我将只会遇到一个运行很长时间的后台作业.

替代方案(这就是我想要的)是每当一个作业完成时,bash应该开始队列中的下一个作业,以便在任何给定时间保持3个作业的速率.是否可以编写一个bash脚本来实现这个替代方案,可能使用循环？请注意,我需要运行更多的工作,我希望这种替代方法能为我节省大量时间.

这是我的脚本草稿,我希望你可以帮助我验证它的正确性并改进它,因为我是bash脚本的新手.此脚本中的想法是从here,here和here获取和修改的：

for i in $(seq 6)
do
   # wait here if the number of jobs is 3 (or morE)
   while (( (( $(jobs -p | wc -l) )) >= 3 )) 
   do 
      sleep 5      # check again after 5 seconds
   done

   jobs -x ./j$i &
done
wait

恕我直言,我认为这个脚本做了所需的行为.但是,我需要知道 – 来自bash专家 – 如果我做错了什么或者是否有更好的方法来实现这个想法.

非常感谢你.

解决方法

使用GNU xargs：

printf '%s\0' j{1..6} | xargs -0 -n1 -P3 sh -c './"$1"' _

使用bash(4.X)内置：

@H_936_9@max_jobs=3; cur_jobs=0 for ((i=0; i<6; i++)); do # If true,wait until the next BACkground job finishes to conTinue. ((cur_jobs >= max_jobs)) && wait -n # Increment the current number of jobs running. ./j"$i" & ((++cur_jobs)) done wait

请注意,依赖于内置函数的方法有一些极端情况 – 如果您有多个作业在同一时间退出,则单个等待-n可以获得其中几个,从而有效地消耗多个插槽.如果我们想要更强大,我们最终可能会得到以下内容：

@H_936_9@max_jobs=3 declare -A cur_jobs=( ) # build an associative array w/ PIDs of jobs we started for ((i=0; i<6; i++)); do if (( ${#cur_jobs[@]} >= max_jobs )); then wait -n # wait for at least one job to exit # ...and then remove any jobs that aren't running from the table for pid in "${!cur_jobs[@]}"; do kill -0 "$pid" 2>/dev/null && unset cur_jobs[$pid] done fi ./j"$i" & cur_jobs[$!]=1 done wait

……这显然是很多工作,但仍然有一个小的种族.考虑使用Xargs -P代替.

本图文内容来源于网友网络收集整理提供，作为学习参考使用，版权属于原作者。