Linux   发布时间:2022-04-01  发布网站:大佬教程  code.js-code.com
大佬教程收集整理的这篇文章主要介绍了linux – bash脚本在后台运行一定数量的作业大佬教程大佬觉得挺不错的,现在分享给大家,也给大家做个参考。

概述

我需要一个bash脚本在后台运行一些作业,一次三个作业. 我知道可以通过以下方式做到这一点,为了说明,我假设工作的数量是6: ./j1 & ./j2 & ./j3 & wait ./j4 & ./j5 & ./j6 & wait 但是,通过这种方式,例如,如果j2运行j1和j3需要更长的时间,那么,我将只会遇到一个运行很长时间的后台作业. 替代方案(这就是我想要的)是每当一个作业完成时,bash应
我需要一个bash脚本在后台运行一些作业,一次三个作业.

我知道可以通过以下方式做到这一点,为了说明,我假设工作的数量是6:

./j1 &
./j2 &
./j3 &
wait
./j4 &
./j5 &
./j6 &
wait

但是,通过这种方式,例如,如果j2运行j1和j3需要更长的时间,那么,我将只会遇到一个运行很长时间的后台作业.

替代方案(这就是我想要的)是每当一个作业完成时,bash应该开始队列中的下一个作业,以便在任何给定时间保持3个作业的速率.是否可以编写一个bash脚本来实现这个替代方案,可能使用循环?请注意,我需要运行更多的工作,我希望这种替代方法能为我节省大量时间.

这是我的脚本草稿,我希望你可以帮助我验证它的正确性并改进它,因为我是bash脚本的新手.此脚本中的想法是从here,herehere获取修改的:

for i in $(seq 6)
do
   # wait here if the number of jobs is 3 (or more)
   while (( (( $(jobs -p | wc -l) )) >= 3 )) 
   do 
      sleep 5      # check again after 5 seconds
   done

   jobs -x ./j$i &
done
wait

恕我直言,我认为这个脚本做了所需的行为.但是,我需要知道 – 来自bash专家 – 如果我做错了什么或者是否有更好的方法来实现这个想法.

非常感谢你.

解决方法

使用GNU xargs:

printf '%s\0' j{1..6} | xargs -0 -n1 -P3 sh -c './"$1"' _

使用bash(4.x)内置:

max_jobs=3; cur_jobs=0
for ((i=0; i<6; i++)); do
  # If true,wait until the next background job finishes to continue.
  ((cur_jobs >= max_jobs)) && wait -n
  # Increment the current number of jobs running.
  ./j"$i" & ((++cur_jobs))
done
wait

请注意,依赖于内置函数方法有一些极端情况 – 如果您有多个作业在同一时间退出,则单个等待-n可以获得其中几个,从而有效地消耗多个插槽.如果我们想要更强大,我们最终可能会得到以下内容

max_jobs=3
declare -A cur_jobs=( ) # build an associative array w/ PIDs of jobs we started
for ((i=0; i<6; i++)); do
  if (( ${#cur_jobs[@]} >= max_jobs )); then
    wait -n # wait for at least one job to exit
    # ...and then remove any jobs that aren't running from the table
    for pid in "${!cur_jobs[@]}"; do
      kill -0 "$pid" 2>/dev/null && unset cur_jobs[$pid]
    done
  fi
  ./j"$i" & cur_jobs[$!]=1
done
wait

……这显然是很多工作,但仍然有一个小的种族.考虑使用xargs -P代替.

大佬总结

以上是大佬教程为你收集整理的linux – bash脚本在后台运行一定数量的作业全部内容,希望文章能够帮你解决linux – bash脚本在后台运行一定数量的作业所遇到的程序开发问题。

如果觉得大佬教程网站内容还不错,欢迎将大佬教程推荐给程序员好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。
标签: