python celery beat实现定时任务的示例代码

 更新时间:2024年03月04日 14:44:08   作者:埃菲尔没有塔尖  
在日常工作中,我们常常会用到需要周期性执行的任务,本文主要介绍了python celery beat实现定时任务的示例代码,具有一定的参考价值,感兴趣的可以了解一下

在Celery在python中的应用除了实现异步任务(async task)外也可以执行定时任务(beat)

1.Celery定时任务是什么?

Celery默认任务单元由任务生产者触发,但有时可能需要其自动触发, 而beat进程正是负责此类任务,能够自动触发定时/周期性任务.

在这里插入图片描述

只需要在配置中配置好周期任务,然后在运行一个周期任务触发器(beat)即可

2.直接上代码

目录结构如下:

在这里插入图片描述

celery_app.py 文件代码如下:

import os
import sys
import time
import celery
from pathlib import Path
from datetime import timedelta

# 实例化celery对象
app = celery.Celery(
    "celery_worker",
    backend="redis://:@127.0.0.1:6379/4",
    broker="redis://:@127.0.0.1:6379/5",
    include=[
        "celery_worker.email.tasks"
    ],
)

# celery beat 定时任务
beat_schedule = {
    'periodic_task-every-minute': {
        # 'task': 'celery_worker.email.tasks.add',
        'task': 'chain.send_chains',
        'schedule': timedelta(seconds=10),
        'args': (11, 22)
    },
}

# 配置文件
app.conf.update(
    task_serializer="json",
    result_serializer="json",
    accept_content=["json"],
    task_default_queue="normal",
    timezone="Asia/Shanghai",
    enable_utc=False,
    task_ignore_result=True,
    redis_max_connections=100,
    result_expires=3600,
    beat_schedule=beat_schedule
)

"""
celery -A celery_worker.celery_app worker -l info
celery -A celery_worker.celery_app beat
"""

email.tasks.py 代码如下:

from loguru import logger
# 模块化之后
from celery_worker.celery_app import app

@app.task(name='chain.send_chains')
def add(x, y):
    logger.info(f'number_add 进来了...x:{x}, y:{y}')
    return x + y

然后顺序启动 worker 和 beat 定时任务(记得两个都必须启动)

执行如下命令:

celery -A celery_worker.celery_app worker -l info   (启动干活的人)
celery -A celery_worker.celery_app beat  (启动定时任务 类似crontab)

效果如下:

在这里插入图片描述

在这里插入图片描述

其实简单的来说就是这点代码:

beat_schedule = {
    'periodic_task-every-minute': {
        # 'task': 'celery_worker.email.tasks.add',
        'task': 'chain.send_chains',
        'schedule': timedelta(seconds=10),
        'args': (11, 22)
    },
}

periodic_task-every-minute 这个就是定时任务的名字 ,随便起无所谓。

重点是这个 "task",经过实际测试,如果这个工作函数没有指定name 名字的话,默认就是 函数路径+函数名称 也就是 'celery_worker.email.tasks.add'

但是如果这函数添加name属性值的话 直接用名字也是可以的,也就是'chain.send_chains'

到此这篇关于python celery beat实现定时任务的示例代码的文章就介绍到这了,更多相关python celery beat定时任务内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • Pytorch用Tensorboard来观察数据

    Pytorch用Tensorboard来观察数据

    这篇文章主要介绍了Pytorch用Tensorboard来观察数据,上一篇文章我们讲解了关于Pytorch Dataset的数据处理,这篇我们就来讲解观察数据,下面具体相关资料,需要的朋友可以参考一下,希望对你有所帮助
    2021-12-12
  • python中的unittest框架实例详解

    python中的unittest框架实例详解

    在本篇文章里小编给大家分享的是一篇关于python中的unittest框架实例详解内容,对此有兴趣的朋友们可以学习下。
    2021-02-02
  • python热力图实现简单方法

    python热力图实现简单方法

    在本篇内容里小编给大家分享的是一篇关于python热力图实现简单方法,对此有兴趣的朋友们可以学习下。
    2021-01-01
  • Python 列表list使用介绍

    Python 列表list使用介绍

    这篇文章主要介绍了Python 列表list使用介绍,需要的朋友可以参考下
    2014-11-11
  • 用1行Python代码识别身份证信息实例

    用1行Python代码识别身份证信息实例

    这篇文章主要介绍了用1行Python代码识别身份证信息实例的相关资料,需要的朋友可以参考下
    2023-01-01
  • Python数据分析之使用scikit-learn构建模型

    Python数据分析之使用scikit-learn构建模型

    这篇文章主要介绍了Python数据分析之使用scikit-learn构建模型,sklearn提供了model_selection模型选择模块、preprocessing数据预处理模块、decompisition特征分解模块,更多相关内容需要朋友可以参考下面文章内容
    2022-08-08
  • pandas.dataframe中根据条件获取元素所在的位置方法(索引)

    pandas.dataframe中根据条件获取元素所在的位置方法(索引)

    今天小编就为大家分享一篇pandas.dataframe中根据条件获取元素所在的位置方法(索引),具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2018-06-06
  • 分享10提高 Python 代码的可读性的技巧

    分享10提高 Python 代码的可读性的技巧

    这篇文章主要介绍了分享10提高 Python 代码的可读性的技巧,本文介绍20个常用的Python技巧来提高代码的可读性,并能帮助你节省大量时间,下面的技巧将在你的日常编码练习中非常实用,需要的朋友可以参考一下
    2022-03-03
  • Python中的请求重试策略深入探讨

    Python中的请求重试策略深入探讨

    在网络通信中,由于各种原因,请求可能会失败,为了增加程序的健壮性和可靠性,实现一个优雅的请求重试策略是至关重要的,本文将深入探讨如何在Python中实现优雅的请求重试,通过丰富的示例代码和详细的解释,帮助大家更好地理解和应用重试机制
    2024-01-01
  • Python 实现数据结构-堆栈和队列的操作方法

    Python 实现数据结构-堆栈和队列的操作方法

    队、栈和链表一样,在数据结构中非常基础一种数据结构,同样他们也有各种各样、五花八门的变形和实现方式。这篇文章主要介绍了Python 实现数据结构-堆栈和队列的操作方法,需要的朋友可以参考下
    2019-07-07

最新评论