我遇到了crontab的一个奇怪的问题:我在crontab中有正确的条目,已经正确设置了我的路径,但是当作业通过crontab运行时,它们运行方式不同(例如,不生成日志文件,数据是没有写入文件)。但是,当我在命令行中键入 EXACT 命令时,脚本按预期工作。
这不太可能是权限问题,因为我正在运行自己的cronjobs。
以下是相关细节:
0,30 8-18 * * 1-5 python /home/rascal/work/skunkworks/scripts/python/downloaders/make_whoopy.py
0,30 7-18 * * 1-5 /home/rascal/work/skunkworks/scripts/python/scrapers/funny_quotes.sh
0,30 7-20 * * 1-5 /home/rascal/work/skunkworks/scripts/python/scrapers/even_funnier_quotes.sh
Nov 1 09:00:01 BIGBERTHA CRON[8998]: (rascal) CMD (/home/rascal/work/skunkworks/scripts/python/scrapers/funny_quotes.sh)
Nov 1 09:00:01 BIGBERTHA CRON[8999]: (rascal) CMD (/home/rascal/work/skunkworks/scripts/python/scrapers/even_funnier_quotes.sh)
Nov 1 09:00:01 BIGBERTHA CRON[9004]: (rascal) CMD (python /home/rascal/work/skunkworks/scripts/python/downloaders/make_whoopy.py)
Nov 1 09:09:01 BIGBERTHA CRON[9306]: (root) CMD ( [ -x /usr/lib/php/sessionclean ] && /usr/lib/php/sessionclean)
Nov 1 09:09:01 BIGBERTHA CRON[9313]: (root) CMD ( [ -x /usr/lib/php5/maxlifetime ] && [ -x /usr/lib/php5/sessionclean ] && [ -d /var/lib/php5 ] && /usr/lib/php5/sessionclean /var/lib/php5 $(/usr/lib/php5/maxlifetime))
Nov 1 09:17:01 BIGBERTHA CRON[9495]: (root) CMD ( cd / && run-parts --report /etc/cron.hourly)
rascal@BIGBERTHA:~/work/skunkworks/scripts/python/scrapers$ which python
/usr/bin/python
rascal@BIGBERTHA:~/work/skunkworks/scripts/python/scrapers$ which bash
/bin/bash
rascal@BIGBERTHA:~$ which scrapy
/usr/local/bin/scrapy
#!/bin/bash
. /home/rascal/.profile
cd /home/rascal/work/skunkworks/scripts/python/scrapers
scrapy crawl funny_quotes
rascal@BIGBERTHA:~$ /home/rascal/work/skunkworks/scripts/python/scrapers/funny_quotes.sh
2017-11-01 09:57:05 [scrapy.utils.log] INFO: Scrapy 1.4.0 started (bot: scrapers)
2017-11-01 09:57:05 [scrapy.utils.log] INFO: Overridden settings: {'NEWSPIDER_MODULE': 'scrapers.spiders', 'SPIDER_MODULES': ['scrapers.spiders'], 'BO
T_NAME': 'scrapers'}
2017-11-01 09:57:05 [scrapy.middleware] INFO: Enabled extensions:
['scrapy.extensions.memusage.MemoryUsage',
'scrapy.extensions.logstats.LogStats',
'scrapy.extensions.telnet.TelnetConsole',
'scrapy.extensions.corestats.CoreStats']
...
为什么通过cron以不同方式运行作业?
答案 0 :(得分:1)
事实证明,这与环境问题有关。 Cron向syslog报告它已经运行了该作业,但没有创建任何文件/日志文件。
最终,我解决这个问题的方法是在我的crontab中添加一个MAILTO =用户名。完成此操作后,当作业运行并失败时,我看到了错误消息:
scrapy:找不到命令
然后我通过在我的bash脚本中添加以下语句来解决这个问题:
PATH = $ PATH:在/ usr / local / bin中/
答案 1 :(得分:0)
1)据我所知,我们不是bash funny_quotes.sh
而是funny_quotes.sh
2)从
更改您的cron命令python /home/rascal/work/skunkworks/scripts/python/downloaders/make_whoopy.py
到
cd /home/rascal/work/skunkworks/scripts/python/downloaders/ && python make_whoopy.py
和此一样
/home/rascal/work/skunkworks/scripts/python/scrapers/funny_quotes.sh
到
cd /home/rascal/work/skunkworks/scripts/python/scrapers/ && bash funny_quotes.sh
3)检查您的cron日志
grep CRON /var/log/syslog
我确定您收到类似scrapy - command not found
或类似内容的错误。
要解决此问题,请执行此操作
从shell输入并复制echo $PATH
的输出。
然后打开crontab -e
在文件的最顶部,写下PATH=YOUR_COPIED_CONTENTS
这应该有用。
答案 2 :(得分:0)
您可以为cron创建自定义日志。
0,30 8-18 * * 1-5 python /home/.../make_whoopy.py /home/make_whoopy.py.log 2>&1
这会将stderr和stdout发送到make_whoopy.py.log
如果你想在屏幕上看到输出(脏溶液)
0,30 8-18 * * 1-5 python /home/.../make_whoopy.py > /dev/pts/1
当然,这将在您登录时生效,并且必须根据您的tty更改/ dev / pts / 1
另一种选择是发送邮件
0,30 8-18 * * 1-5 python /home/.../make_whoopy.py > /dev/null 2>&1 | mail -s "cron output" you@example.org
蛋糕的樱桃将输出发送到syslog
0,30 8-18 * * 1-5 python /home/.../make_whoopy.py | /usr/bin/logger -t make_whoopy
-t make_whoopy 将在syslog上创建名为make_whoopy的标记。