书闪笔记
书闪文章
IT
Python教程
Python任务队列 - 异步任务调度与管理
序列化 - msgpack - 高效二进制序列化,加速任务通信
1
任务队列 - Celery - 分布式任务队列框架,支持异步任务处理
125人读过
2
任务队列 - RQ - 基于Redis的轻量级任务队列库
154人读过
3
任务队列 - Huey - 简单易用,支持多后端存储的任务队列
116人读过
4
任务队列 - Dramatiq - 高性能异步任务处理库,兼容Redis/RabbitMQ
182人读过
5
任务队列 - TaskTiger - 基于Redis的任务队列,支持定时任务
138人读过
6
调度器 - APScheduler - 轻量级定时任务调度库,支持多种触发器
133人读过
7
调度器 - schedule - 人性化API设计的时间任务调度工具
111人读过
8
调度器 - Prefect - 现代工作流调度框架,支持任务编排
140人读过
9
调度器 - Airflow - 复杂工作流调度平台,可视化任务依赖
126人读过
10
分布式 - Dask - 并行计算库,支持分布式任务调度
121人读过
11
分布式 - PySpark - Spark的Python接口,大数据任务调度
140人读过
12
分布式 - Dask-Distributed - Dask的分布式任务调度扩展
109人读过
13
分布式 - Pulsar - 事件驱动框架,支持分布式Actor模型
90人读过
14
消息队列 - RabbitMQ - AMQP协议消息中间件,支撑任务队列
100人读过
15
消息队列 - Kafka-Python - Apache Kafka的Python客户端库
86人读过
16
消息队列 - Redis - 内存数据库,常用作任务队列后端
143人读过
17
消息队列 - ZeroMQ - 高性能异步消息传输库
123人读过
18
云服务 - AWS Lambda - 无服务器计算服务,事件驱动任务
133人读过
19
云服务 - Google Cloud Tasks - 云端全托管任务队列服务
119人读过
20
云服务 - Azure Functions - 微软云无服务器任务处理平台
117人读过
21
监控 - Flower - Celery任务实时监控和管理Web界面
133人读过
22
监控 - Celery Monitor - 轻量级Celery任务监控工具
140人读过
23
监控 - Prometheus - 系统监控和任务指标采集框架
120人读过
24
监控 - Grafana - 可视化监控平台,支持任务数据展示
117人读过
25
测试 - pytest-celery - Celery任务的pytest插件及测试工具
86人读过
26
测试 - fakeredis - 模拟Redis服务,用于任务队列测试
102人读过
27
测试 - mocket - 模拟网络请求,测试异步任务依赖
92人读过
28
工作流 - Luigi - 批量任务依赖管理框架,支持管道
104人读过
29
工作流 - Apache Airflow - 编程式工作流编排与调度平台
83人读过
30
工作流 - Prefect - 新一代数据工作流编排引擎
132人读过
31
工作流 - Dagster - 数据应用开发框架,强调任务资产
131人读过
32
重试 - tenacity - 通用任务重试库,多种策略组合
136人读过
33
重试 - backoff - 函数装饰器实现任务指数退避重试
93人读过
34
重试 - retrying - 简单易用的任务重试装饰器库
138人读过
35
并发 - concurrent.futures - 线程/进程池实现并行任务执行
93人读过
36
并发 - gevent - 协程库,通过greenlet实现高并发
94人读过
37
并发 - eventlet - 网络库,协程支持高并发任务处理
113人读过
38
序列化 - pickle - Python对象序列化,用于任务参数传递
140人读过
39
序列化 - msgpack - 高效二进制序列化,加速任务通信
147人读过
40
序列化 - JSON - 通用数据格式,跨平台任务数据交换
138人读过
41
日志 - structlog - 结构化日志记录,辅助任务追踪
100人读过
42
日志 - loguru - 简化日志配置,增强任务调试体验
121人读过
43
依赖管理 - Poetry - 项目管理工具,控制任务环境依赖
114人读过
44
依赖管理 - Pipenv - 虚拟环境与依赖管理工具
152人读过
45
部署 - Docker - 容器化打包任务执行环境
120人读过
46
部署 - Kubernetes - 容器编排,分布式任务集群管理
128人读过
47
部署 - Supervisor - 进程监控工具,保障任务稳定运行
93人读过
48
自动化 - Invoke - 本地和远程任务自动化执行工具
152人读过
49
自动化 - Fabric - SSH任务自动化部署库
104人读过
50
调试 - pdb - Python调试器,任务断点排查
145人读过
51
调试 - ipdb - 增强交互式调试工具,支持异步任务
131人读过
52
网络 - Twisted - 事件驱动网络引擎,支持异步协议
133人读过
53
网络 - aioftp - 异步FTP客户端,文件传输任务支持
137人读过
54
存储 - MinIO - 对象存储服务,文件任务处理支持
112人读过
55
性能 - uvloop - 替代asyncio事件循环,提升异步性能
109人读过
56
性能 - Cython - 静态编译加速任务密集型代码
116人读过
57
模板 - Mako - 高性能模板库,任务文本快速生成
123人读过
58
安全 - cryptography - 加密任务数据传输与存储
122人读过
59
安全 - pyOpenSSL - SSL/TLS工具库,安全通信保障
149人读过
60
测试数据 - Faker - 生成仿真测试数据,用于任务模拟
127人读过
61
测试数据 - FactoryBoy - 创建测试模型实例,辅助任务
98人读过
62
错误追踪 - Sentry - 实时错误监控,捕捉任务异常
117人读过
63
错误追踪 - Rollbar - 云端错误跟踪服务,任务异常上报
83人读过
64
地理任务 - GeoDjango - 处理地理空间数据任务
138人读过
65
数学任务 - SciPy - 科学计算工具集,复杂任务处理
135人读过
66
数据管道 - Bonobo - 轻量级数据ETL任务处理库
97人读过
67
数据管道 - Mara - 数据集成管道框架,支持复杂流程
118人读过
68
图像处理 - Pillow - 图像操作库,批量图片处理任务
112人读过
69
图像处理 - OpenCV - 计算机视觉任务处理库
95人读过
70
音频处理 - pydub - 音频文件处理任务简化库
110人读过
71
视频处理 - moviepy - 视频剪辑自动化任务库
109人读过
72
爬虫 - Celery-Scrapy - 整合Celery的分布式爬虫方案
103人读过
73
浏览器自动化 - Playwright - 现代浏览器自动化任务工具
139人读过
74
邮件 - django-celery-email - 异步发送邮件的集成方案
113人读过
75
邮件 - aiosmtplib - 异步SMTP客户端,邮件任务处理
137人读过
76
缓存 - django-cacheops - Django ORM缓存,加速任务
128人读过
77
缓存 - aiocache - 异步缓存库,支持多种后端存储
127人读过
78
通知 - pushbullet.py - 推送通知服务,任务结果提醒
115人读过
79
通知 - slack-sdk - Slack消息集成,任务状态同步
82人读过
80
时间处理 - pendulum - 更易用的时间处理库,任务调度
131人读过
81
时间处理 - arrow - 日期时间库,简化任务时间操作
124人读过
82
CLI工具 - Click - 命令行工具开发,任务脚本构建
113人读过
83
CLI工具 - Typer - 基于类型提示的CLI任务库
137人读过
84
配置管理 - python-dotenv - 环境变量管理,任务配置分离
137人读过
85
配置管理 - Dynaconf - 多环境配置管理,任务灵活部署
99人读过
86
代码质量 - flake8 - 代码规范检查,保障任务代码质量
117人读过
87
代码质量 - Black - 自动化代码格式化,统一任务代码风格
145人读过
88
文档生成 - Sphinx - 项目文档生成,任务使用说明维护
118人读过
89
文档生成 - MkDocs - 静态站点生成,任务文档展示
105人读过
序列化 - msgpack - 高效二进制序列化,加速任务通信
精彩教程
Docker教程
pandas转换pd.melt()多列转多行
Flask - return 返回参数 - RestfulAPI
RabbitMQ教程
Flask - 扩展 - SQLAlchemy - 查转换DataFrame
jQuery教程
文件详解 - settings.py + 测试、生产、正式环境
Lua教程
Flask - 扩展 - redis - pipeline批量
请求返回 - xxx.html - 模板
pandas数据类型print(df.dtypes)查看数据类型
服务器教程
Flask - 扩展 - SQLAlchemy - 准备
pandas选择数据df.iloc[:,:]行index,列index
Objective-C教程
Flask - 用代码创建数据库
pandas运算df.agg()聚合运算
扩展 - 定时任务 - django-apscheduler - @register_job
Android教程
Javascript教程
Spring教程
python入门基础教程
Flask - 加上微信支付
pandas导出数据df.to_xml() XML
pandas导出数据df.to_csv()CSV文件
pandas获得数据值 选择后.index[0]
Vue.js教程
表模型 - django.db.models - 事务
请求 - views.py - 返回return
配置文件 - 多环境 - dev_config.py
粤ICP备19057273号-3