python-celery专注于实现分布式异步任务处理、任务调度的插件!
2021/10/13 13:14:10
本文主要是介绍python-celery专注于实现分布式异步任务处理、任务调度的插件!,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!
celery是一个基于分布式消息传输的异步任务队列,它专注于实时处理,同时也支持任务调度。它的执行单元为任务(task),利用多线程,如Eventlet,gevent等,它们能被并发地执行在单个或多个职程服务器(worker servers)上。任务能异步执行(后台运行)或同步执行(等待任务成)。
Celery的三个主要模块
''' worker:用于执行队列中的工作任务 beat:用于定时分配工作任务 task:工作任务,可以是在代码里的调用、也可以是被beat分配定时任务 '''
Celery的使用条件
''' 1、安装消息中间件的支持,一般是redis。 pip install redis 2、安装Celery的支持 pip install celery 3、安装本地redis服务端并启动 '''
做一个Celery定时任务
''' 导入相关依赖包 ''' import celery # celery 定时任务包 import time # 时间记录 from datetime import timedelta # 时间处理 ''' 创建一个worker用来执行定时任务 ''' # 创建worker、连接到redis消息中间件 worker = celery.Celery("work_test", backend="redis://localhost:6379/", broker="redis://localhost:6379/") # 创建任务配置类TaskConfig class TaskConfig: beat_suhedule = { 'update_info': { 'task': 'test013.test3.test_task', # 任务所在的模块.函数 "schedule": timedelta(seconds=5), # 定时任务间隔时间 } } # worker配置生效 worker.config_from_object(TaskConfig) @worker.task def test_task(): ''' 任务 :return: ''' return "当前任务执行状态:success,{}".format(time.time()) ''' 启动 beat 分配定时任务 celery -A test3.worker beat ''' # C:\work-code\base-python3\test013>celery -A test3.worker beat ''' 启动 beat 分配定时任务 celery -A test3.worker worker ''' # C:\work-code\base-python3\test013>celery -A test3.worker worker
这篇关于python-celery专注于实现分布式异步任务处理、任务调度的插件!的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!
- 2024-11-26Python基础编程
- 2024-11-25Python编程基础:变量与类型
- 2024-11-25Python编程基础与实践
- 2024-11-24Python编程基础详解
- 2024-11-21Python编程基础教程
- 2024-11-20Python编程基础与实践
- 2024-11-20Python编程基础与高级应用
- 2024-11-19Python 基础编程教程
- 2024-11-19Python基础入门教程
- 2024-11-17在FastAPI项目中添加一个生产级别的数据库——本地环境搭建指南