如何设置Python爬虫定时任务

最新推荐文章于 2025-04-07 00:25:12 发布

python阿喵

最新推荐文章于 2025-04-07 00:25:12 发布

阅读量1k

点赞数

分类专栏： python 文章标签： python 编程语言

本文链接：https://blog.csdn.net/python_miao/article/details/112918810

版权

本文介绍了Python爬虫定时任务的三种方法：while True死循环、Timer模块和sched模块。详细阐述了每种方法的适用场景和优缺点，帮助读者选择合适的定时策略。同时还提醒在实际工作中要考虑的因素，如多任务执行、网络稳定性等。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

记得以前的Windows任务定时是可以正常使用的，今天试了下，发现不能正常使用了，任务计划总是挂起。接下来记录下Python爬虫定时任务的几种解决方法。

方法一、while True

首先最容易的是while true死循环挂起，不废话，直接上代码：

import os
import time
import sys 
from datetime import datetime, timedelta
def One_Plan():
     # 设置启动周期
     Second_update_time = 24 * 60 * 60

    # 当前时间
    now_Time = datetime.now()
    # 设置 任务启动时间
    plan_Time = now_Time.replace(hour=9, minute=0, second=0, microsecond=0)  
    # 设置差值，-1 day, 21:48:53.246576，类似于这样
    # time.sleep()需要传入int，所以下面使用.total_seconds() 
    # 主要用来计算差值，返回int，具体功能可以自行查阅相关资料
    delta = plan_Time - now_Time
    first_plan_Time = delta.total_seconds() % Second_update_time
    print("距离第一次执行需要睡眠%d秒" % first_plan_Time)
    return first_plan_Time

# while Ture代码块，挂起程序，睡眠时间结束后调用函数名进行执行
while True:

    s1 = One_Plan()
    time.sleep(s1)
    # 下面这里是自己定义的函数，想跑代

最低0.47元/天解锁文章