bash - 带有 "export -f "的 BASH 脚本中的 GNU Parallel 在 Crond 时失败并出现 "Command Not Found"错误

Question

如果我在命令 shell 上以交互方式运行我的脚本，它就会工作:

$ cat ndmpcopy_cron_parallel_svlinf05.bash
#!/usr/software/bin/bash

ndmpcopy_cron_parallel() {

timestamp=`date +%Y%m%d-%H%M`
LOG=/x/eng/itarchives/ndmpcopylogs/05_$1/ndmpcopy_status
TSLOG=${LOG}_$timestamp

src_filer='svlinf05'
src_account='ndmp'
src_passwd='src_passwd'
dst_svm='svlinfsrc'
dst_account='vsadmin-backup'
dst_passwd='dst_passwd'

host=`hostname`
echo $host

ssh -l root $src_filer "priv set -q diag ; ndmpcopy -sa $src_account:$src_passwd -da $dst_account:$dst_passwd -i $src_filer.eng.netapp.com:/vol/$1 10.56.10.161:/$dst_svm/$1" | tee -a $TSLOG

echo "ndmpcopy Completed: `date` "

}

export -f ndmpcopy_cron_parallel

/u/jsung/bin/parallel -j 0 --wd . --env ndmpcopy_cron_parallel --eta ndmpcopy_cron_parallel ::: local

但是，脚本失败并提示找不到导出函数 ndmpcopy_cron_parallel:

$ crontab -l

40 0,2,4,6,8,10,12,14,16,18,20,22 * * * /u/jsung/bin/ndmpcopy_cron_parallel_svlinf05.bash

错误:

Subject: Cron <jsung@cycrh6svl18> /u/jsung/bin/ndmpcopy_cron_parallel_svlinf05.bash


Computers / CPU cores / Max jobs to run
1:local / 2 / 1

Computer:jobs running/jobs completed/%of started jobs/Average seconds to complete
 ETA: 0s Left: 1 AVG: 0.00s  local:1/0/100%/0.0s **/bin/bash: ndmpcopy_cron_parallel: command not found**
 ETA: 0s Left: 0 AVG: 0.00s  local:0/1/100%/0.0s 

一段时间以来，我一直在四处寻找并尝试不同的东西。我什至调整了 $PATH。不知道我错过了什么。我们可以在 BASH 脚本中嵌入 GNU Parallel 并完全放入 crontab 吗？

Answer 1

恭喜。你去过shell-shocked .

您的系统上安装了两个版本的 bash:

• /bin/bash v4.1.2 一个较旧的未打补丁的 bash
• /usr/software/bin/bash v4.2.53 中年 bash，针对 Shellshock 打了补丁

bash 版本三元组中的最后一个数字是补丁级别。 Shellshock 漏洞涉及多个补丁，但相关补丁是 4.1.14、4.2.50 和 4.3.27。该补丁更改了导出函数的格式，结果是:

• 如果您将函数从 shellshock 前的 bash 导出到 shellshock 后的 bash，您将看到一条警告，并且导出的函数将被拒绝。
• 如果您将函数从 shellshock 后的 bash 导出到 shellshock 前的 bash，函数导出格式将无法识别，因此将被静默忽略。

在这两种情况下，函数都不会被导出。换句话说，如果两个 bash 版本都已打过 shellshock 补丁，或者两个都没有打过 shellshock 补丁，则只能在两个 bash 版本之间导出一个函数。

您的脚本清楚地指出了使用哪个 bash 来运行它:/usr/software/bin/bash 中的那个，它已被修补。该脚本调用 GNU parallel，然后 GNU parallel 必须启动一个或多个子 shell 才能运行命令。 GNU parallel 使用 SHELL 环境变量的值来查找它应该使用的 shell。

我假设在您的用户命令 shell 环境中，SHELL 设置为 /usr/software/bin/bash，并且在 所在的环境中cron 执行，它被设置为 /bin/bash。如果是这种情况，当您从 bash 提示符下尝试导出该函数时不会有任何问题，但在 cron 环境中，您最终将尝试从 post-shellshock bash 中导出函数到 shellshock 前的 bash，如上所述，结果是导出被静默忽略。因此错误。

要解决此问题，您需要确保您使用的用于运行命令脚本的 bash 与 GNU parallel 使用的 bash 相同。例如，您可以在调用 GNU parallel 之前显式设置 shell。

export SHELL=/usr/software/bin/bash
# ...
/u/jsung/bin/parallel -j 0 --wd . --env ndmpcopy_cron_parallel --eta ndmpcopy_cron_parallel ::: local

或者你可以为并行命令本身设置它:

SHELL=/usr/software/bin/bash /u/jsung/bin/parallel -j 0 --wd . --env ndmpcopy_cron_parallel --eta ndmpcopy_cron_parallel ::: local