同一个可执行文件， cron 启动和手动启动，程序行为不一样...？

This topic created in 3768 days ago, the information mentioned may be changed or developed.

比较棘手的异常，不知该如何 debug 。
只能求助大伙了！

CentOS 6.4 64 上部署了一个文件夹 A ，内有可执行文件 B 。
B 的代码逻辑是启动后会重复输出日志 C 。

异常现象：
crontab 启动 B ，没有日志 C （异常）。
手动启动 B ，有日志 C （正常）。

Tips ：
B 的上一个 release 是没有日志 C 的。
但当前 B 已经用最新版本的文件覆盖了。

我的疑惑：
是否 cron 启动的是某个 cache ，而该 cache 没有同步到 A 的最新版本？

启动

日志

cron

Cache

25 replies • 2016-02-05 09:44:22 +08:00

clino

Feb 1, 2016

会不会是因为环境变量不一样

tanyuxiang

Feb 1, 2016 via Android

环境变量

lynnworld

Feb 1, 2016

看 cron 日志是否有记录

k9982874

Feb 1, 2016

工作目录（或者日志存储目录）你有设置么？

cron 的工作目录和你手动 cd 到文件夹 A 再执行 B 的工作目录是不同的。
你如果设置日志存储目录是当前工作目录（‘，’）， cron 运行日志是不会存在文件夹 A 里的。

cexia

Feb 1, 2016

@clino @tanyuxiang 环境变量，在用来启动 B 的脚本中，有如下一行：
"export LD_LIBRARY_PATH=./:$LD_LIBRARY_PATH"
一直都是没有动过的。
其他环境变量方面的设置就没有了。

cexia

Feb 1, 2016

@lynnworld cron 确实启动了 B 的进程，这个是没问题的。 cron 日志里也未见异常。

ck1llc

Feb 1, 2016

1 检查环境变量
2 检查脚本执行目录

cexia

Feb 1, 2016

貌似没法修改提问了，之前的表述可能有歧义，我重述一下：

CentOS 6.4 64 上部署了一个文件夹 A ，内有可执行文件 B 。
B 的代码逻辑是启动后会重复输出日志内容 C 到日志文件 F 。

异常现象：
crontab 启动 B ，有日志文件 F ， F 内包含其他正常日志内容，但没有日 C （异常）。
手动启动 B ，有 F ，有 C （正常）。

Tips ：
B 的上一个 release 是没有 C 的。
但当前 B 已经用最新版本的文件覆盖了。

我的疑惑：
是否 cron 启动的是某个 cache ，而该 cache 没有同步到 A 的最新版本？

k9982874

Feb 1, 2016

1 、 kill 掉已经运行的所有 A 实例，并 PS 检查是否真的全部 kill 掉了
2 、检查代码逻辑，看看 log 级别的设置，
3 、检查 log 配置文件中的 log 配置级别，是否包含程序中的 log 级别

cron 或者系统层就没别要去怀疑了，都是跑了几十年的东西。

ms2008

Feb 1, 2016

C 属于哪个级别？ stdout or stderr?

上传一段代码片段，什么都没有，靠猜？

cexia

Feb 1, 2016

@k9982874 Thanks a lot
ps -aux | grep 查看过， A 的进程数正常。
日志并未采用框架， C 的日志代码是 fprintf(stderr, ...)。
nohup ./B 2>&1 1>nohup.out &
同样的文件夹 A ，不一样的启动方式， nohup.out 里唯独少了 C 。

Feb 1, 2016

@cexia corn 执行的 B 没权限写 F

k9982874

Feb 1, 2016

@cexia 疑难杂症，上 GDB 吧

ms2008

Feb 1, 2016

@cexia 我没有记错的话 nohup 默认会将 redirecting stderr to stdout ，所以你没有必要 2>&1 ，直接用 1>> result.log (建议使用追加放到另外一个日志先去调试， nohup.out nohup 会使用的)
另外在 crontab 建议你用全路径启动看看(crontab 咋写的？)

ms2008

Feb 1, 2016

你也可以直接 nohup ./B & 默认会记录到 nohup.out

cexia

Feb 1, 2016

@ms2008

用户： pozzi

crontab -l:
40 8 * * 1-5 /home/pozzi/start.sh &

start.h:
cd ~/X/bin/
~/X/bin/run.sh &

run.sh:
date=`date +%Y%m%d%H%M%S`
export LD_LIBRARY_PATH=./:$LD_LIBRARY_PATH
cd /home/pozzi/X/bin/
ulimit -c unlimited
ulimit -s 102400
mv -f ./nohup.out ./nohups/nohup_${date}.out
nohup ./B 2>&1 1>nohup.out &

linkiosk

Feb 1, 2016

我以前也被类似的问题困扰过，最后确定是环境变量的问题

cexia

Feb 1, 2016

@ms2008
nohup 用法的提醒，我修改后试试

leiz

Feb 1, 2016

重定向一下试试?

cexia

Feb 1, 2016

@linkiosk 能否帮忙回忆一下是什么环境变量的设置？

linkiosk

Feb 1, 2016

@cexia 好像是 PATH

402124773

Feb 1, 2016

nohup 的问题把
nohup 和重定向一起，可能是这个问题导致的。
可以先用个非常短的脚本试试。

uuspider

Feb 1, 2016

应该是 B 中环境变量设置不当引起的。

gamexg

Feb 1, 2016

碰到过 cron 启动的程序有比较长的控制台输出，跑到一半就被杀掉了。
未找到原因，重定向保准输出解决。

cexia

Feb 5, 2016

@ms2008 @402124773
OK ，大伙们，这个问题解决了

错误的启动脚本命令行是： nohup ./B 2>&1 1>nohup.out &

修改后，分为两个脚本: run_cron.sh 和 run.sh

run_cron.sh:
./B > nohup.out 2>&1 &

run.sh:
nohup ./B &

参考：
[0] nohup --help
...
If standard input is a terminal, redirect it from /dev/null.
If standard output is a terminal, append output to `nohup.out' if possible,
`$HOME/nohup.out' otherwise.
If standard error is a terminal, redirect it to standard output.
To save output to FILE, use `nohup COMMAND > FILE'.
...

[1] http://stackoverflow.com/questions/14145250/cron-job-doesnt-output-to-nohup-out/14146575#14146575

[2] http://www.cyberciti.biz/faq/redirecting-stderr-to-stdout/