linux - 如何暂停使用 crontab 启动的 php 脚本？

Question

我有一个 PHP 抓取工具每晚在一个非常大的网站上运行。 Crontab 在凌晨 2 点启动脚本并在早上 7 点 pkill 它。现在我担心残酷地杀死脚本可能会导致数据丢失。假设 crontab 在脚本正忙于将抓取的数据写入数据库时​​调用脚本，那么第二天数据库将拒绝最后/第一条记录，因为它已经存在(即使不完全存在)。

有什么办法可以用 crontab 卡住脚本吗？ (也就是说，没有在我的脚本中添加 sleep() )

Answer 1

Let's say that crontab calls the script off while the script is busy writing my scraped data into the database

这将是一个问题，因为如果您从外部停止进程，您将遇到事务超时或其他问题。更好的方法是让脚本自行停止/暂停。例如，您可以定义一些由脚本定期检查的标记文件，以便脚本可以以受控方式停止/暂停。