Python定時任務工具之APScheduler使用方式
更新時間：2019年07月24日 11:30:36 作者：Simon_Zhou
APScheduler （advanceded python scheduler）是一款Python開發(fā)的定時任務工具。這篇文章主要介紹了Python定時任務工具--APScheduler的使用方式,需要的朋友可以參考下
APScheduler （advanceded python scheduler）是一款Python開發(fā)的定時任務工具。
文檔地址 apscheduler.readthedocs.io/en/latest/u…
特點：
- 不依賴于Linux系統(tǒng)的crontab系統(tǒng)定時，獨立運行
- 可以 動態(tài)添加 新的定時任務，如下單后30分鐘內(nèi)必須支付，否則取消訂單，就可以借助此工具（每下一單就要添加此訂單的定時任務）
- 對添加的定時任務可以做持久保存
1 安裝
pip install apscheduler
2 組成
- APScheduler 由以下四部分組成：
- triggers 觸發(fā)器 指定定時任務執(zhí)行的時機
- job stores 存儲器 可以將定時持久存儲
- executors 執(zhí)行器 在定時任務該執(zhí)行時，以進程或線程方式執(zhí)行任務
- schedulers 調(diào)度器 常用的有BackgroundScheduler（ 后臺運行 ）和BlockingScheduler( 阻塞式 )
3 使用方式
from apscheduler.schedulers.background import BlockingScheduler
#
創(chuàng)建定時任務的調(diào)度器對象
scheduler = BlockingScheduler()
# 創(chuàng)建執(zhí)行器
executors = {
'default': ThreadPoolExecutor(20),
}
# 定義定時任務
def my_job(param1, param2): # 參數(shù)通過add_job()args傳遞傳遞過來
print(param1) # 100
print(param2) # python
# 向調(diào)度器中添加定時任務
scheduler.add_job(my_job, 'date', args=[100, 'python'], executors=executors)
# 啟動定時任務調(diào)度器工作
scheduler.start()
4 調(diào)度器 Scheduler
負責管理定時任務
BlockingScheduler : 作為獨立進程時使用
from apscheduler.schedulers.blocking import BlockingScheduler scheduler = BlockingScheduler() scheduler.start() # 此處程序會發(fā)生阻塞 BackgroundScheduler : 在框架程序（如Django、Flask）中使用. from apscheduler.schedulers.background import BackgroundScheduler scheduler = BackgroundScheduler() scheduler.start() # 此處程序不會發(fā)生阻塞
- AsyncIOScheduler : 當你的程序使用了asyncio的時候使用。
- GeventScheduler : 當你的程序使用了gevent的時候使用。
- TornadoScheduler : 當你的程序基于Tornado的時候使用。
- TwistedScheduler : 當你的程序使用了Twisted的時候使用
- QtScheduler : 如果你的應用是一個Qt應用的時候可以使用。
4 執(zhí)行器 executors
在定時任務該執(zhí)行時，以進程或線程方式執(zhí)行任務
ThreadPoolExecutor from apscheduler.executors.pool import ThreadPoolExecutor ThreadPoolExecutor(max_workers)
使用方法
from apscheduler.executors.pool import ThreadPoolExecutor
executors = {
'default': ThreadPoolExecutor(20) # 最多20個線程同時執(zhí)行
}
scheduler = BackgroundScheduler(executors=executors)
ProcessPoolExecutor
from apscheduler.executors.pool import ProcessPoolExecutor
ProcessPoolExecutor(max_workers)
使用方法
from apscheduler.executors.pool import ProcessPoolExecutor
executors = {
'default': ProcessPoolExecutor(5) # 最多5個進程同時執(zhí)行
}
scheduler = BackgroundScheduler(executors=executors)
5 觸發(fā)器 Trigger
指定定時任務執(zhí)行的時機。
1） date 在特定的時間日期執(zhí)行
from datetime import date # 在2019年11月6日00:00:00執(zhí)行 sched.add_job(my_job, 'date', run_date=date(2019, 11, 6)) # 在2019年11月6日16:30:05 sched.add_job(my_job, 'date', run_date=datetime(2009, 11, 6, 16, 30, 5)) sched.add_job(my_job, 'date', run_date='2009-11-06 16:30:05') # 立即執(zhí)行 sched.add_job(my_job, 'date') sched.start()
2） interval 經(jīng)過指定的時間間隔執(zhí)行
weeks (int) – number of weeks to wait days (int) – number of days to wait hours (int) – number of hours to wait minutes (int) – number of minutes to wait seconds (int) – number of seconds to wait start_date (datetime|str) – starting point for the interval calculation end_date (datetime|str) – latest possible date/time to trigger on timezone (datetime.tzinfo|str) – time zone to use for the date/time calculations from datetime import datetime # 每兩小時執(zhí)行一次 sched.add_job(job_function, 'interval', hours=2) # 在2012年10月10日09:30:00 到2014年6月15日11:00:00的時間內(nèi)，每兩小時執(zhí)行一次 sched.add_job(job_function, 'interval', hours=2, start_date='2012-10-10 09:30:00', end_date='2014-06-15 11:00:00')
3） cron 按指定的周期執(zhí)行
year (int|str) – 4-digit year month (int|str) – month (1-12) day (int|str) – day of the (1-31) week (int|str) – ISO week (1-53) day_of_week (int|str) – number or name of weekday (0-6 or mon,tue,wed,thu,fri,sat,sun) hour (int|str) – hour (0-23) minute (int|str) – minute (0-59) second (int|str) – second (0-59) start_date (datetime|str) – earliest possible date/time to trigger on (inclusive) end_date (datetime|str) – latest possible date/time to trigger on (inclusive) timezone (datetime.tzinfo|str) – time zone to use for the date/time calculations (defaults to scheduler timezone) # 在6、7、8、11、12月的第三個周五的00:00, 01:00, 02:00和03:00 執(zhí)行 sched.add_job(job_function, 'cron', month='6-8,11-12', day='3rd fri', hour='0-3') # 在2014年5月30日前的周一到周五的5:30執(zhí)行 sched.add_job(job_function, 'cron', day_of_week='mon-fri', hour=5, minute=30, end_date='2014-05-30')
6.任務存儲
MemoryJobStore 默認內(nèi)存存儲 MongoDBJobStore 任務保存到MongoDB from apscheduler.jobstores.mongodb import MongoDB JobStoreMongoDBJobStore()復制代碼 RedisJobStore 任務保存到redis from apscheduler.jobstores.redis import RedisJobStore RedisJobStore()
7 配置方法
方法1
from apscheduler.schedulers.background import BackgroundScheduler
from apscheduler.executors.pool import ThreadPoolExecutor
executors = {
'default': ThreadPoolExecutor(20),
}
conf = { # redis配置
"host":127.0.0.1,
"port":6379,
"db":15, # 連接15號數(shù)據(jù)庫
"max_connections":10 # redis最大支持300個連接數(shù)
}
scheduler = BackgroundScheduler(executors=executors)
scheduler.add_jobstore(jobstore='redis', **conf) # 添加任務持久化存儲方式,如果未安裝redis可省略此步驟
方法2
from pytz import utc
from apscheduler.schedulers.background import BackgroundScheduler
from apscheduler.jobstores.sqlalchemy import SQLAlchemyJobStore
from apscheduler.executors.pool import ProcessPoolExecutor
executors = {
'default': {'type': 'threadpool', 'max_workers': 20},
'processpool': ProcessPoolExecutor(max_workers=5)
}
scheduler = BackgroundScheduler()
# .. 此處可以編寫其他代碼
# 使用configure方法進行配置
scheduler.configure(executors=executors)
8 啟動
scheduler.start()
對于BlockingScheduler ，程序會阻塞在這，防止退出，作為獨立進程時使用。（可以用來生成靜態(tài)頁面）
對于BackgroundScheduler，可以在應用程序中使用。不再以單獨的進程使用。（如30分鐘內(nèi)取消訂單）
9 擴展
任務管理
方式1
job = scheduler.add_job(myfunc, 'interval', minutes=2) # 添加任務 job.remove() # 刪除任務 job.pause() # 暫定任務 job.resume() # 恢復任務
方式2
scheduler.add_job(myfunc, 'interval', minutes=2, id='my_job_id') # 添加任務
scheduler.remove_job('my_job_id') # 刪除任務
scheduler.pause_job('my_job_id') # 暫定任務
scheduler.resume_job('my_job_id') # 恢復任務
調(diào)整任務調(diào)度周期
job.modify(max_instances=6, name='Alternate name')
scheduler.reschedule_job('my_job_id', trigger='cron', minute='*/5')復制代碼
停止APScheduler運行
scheduler.shutdown()
10 綜合使用
這里提供30分鐘取消訂單支付的思路，可以使用Flask或者Django程序都能實現(xiàn)，這里是在django應用中動態(tài)的添加一個定時任務，調(diào)度器需要使用BackgroundScheduler。下面先定義執(zhí)行訂單取消的任務。
from apscheduler.executors.pool import ThreadPoolExecutor from datetime import datetime, timedelta from apscheduler.schedulers.blocking import BackgroundScheduler from goods.models import SKU from orders.models import OrderGoods def cancel_order_job(order_id, sku_id, stock, sales): # 將訂單商品和訂單信息篩選出來 order_goods = OrderGoods.objects.filter( order_id=order_id, sku_id=sku_id) order_goods.delete() # 刪除訂單 try: sku = SKU.objects.get(id=sku_id) sku.stock += stock # 訂單刪掉后商品表里的庫存恢復 sku.sales -= sales # 商品表里銷量還原 sku.save() except Exception as e: print(e)
具體操作哪些表要根據(jù)自身表的設計來定，大致是上面的思路。然后在生成訂單的視圖中同時生成取消訂單的任務。然后將取消訂單cancel_order_job（）需要的參數(shù)傳遞過去，注意要判定當前訂單的狀態(tài)為未支付狀態(tài)。
from datetime import datetime, timedelta
class OrderCommitView(View)：
def post(self, request):
# ... 此處省略生成訂單相關邏輯
if status == OrderInfo.STATUS.UNPADED: # 待支付狀態(tài)
executors = {
'default': ThreadPoolExecutor(10)
}
now = datetime.now()
delay = now + timedelta(minutes=30) # 從當前下訂單延時30分鐘后
scheduler = BackgroundScheduler(executors=executors)
# 添加定時任務
scheduler.add_job(cancel_order_job, 'date', run_date=delay,
args=[order_id, sku.id, sku.stock, sku.sales])
scheduler.start()
# ....省略其他業(yè)務及返回
注意: 如果需要周期性的執(zhí)行一個定時任務，如果用到了django中模型類或者Flask的配置信息等相關信息，需要將框架的配置信息導入。
總結(jié)
以上所述是小編給大家介紹的Python定時任務工具之APScheduler詳解,希望對大家有所幫助，如果大家有任何疑問請給我留言，小編會及時回復大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持！
如果你覺得本文對你有幫助，歡迎轉(zhuǎn)載，煩請注明出處，謝謝！
相關文章
如果你剛剛開始學習 PyTorch,并想學習如何做一些基本的圖像分類,可以看看本文,這篇文章主要給大家介紹了關于如何使用Pytorch完成圖像分類任務的相關資料,需要的朋友可以參考下2022-08-08
這篇文章主要介紹了Python contextlib模塊使用示例,本文著重使用contextlib模塊產(chǎn)生一個上下文管理器,需要的朋友可以參考下2015-02-02
這篇文章主要介紹了python連接遠程ftp服務器并列出目錄下文件的方法,實例分析了Python使用pysftp模塊的技巧,非常具有實用價值,需要的朋友可以參考下2015-04-04
python如何使用python-docx調(diào)整Word文檔樣式
本文介紹了如何修改文字字體樣式、對齊樣式、行間距以及段前段后間距，并通過效果展示給出參考，適用于需要進行文檔編輯的讀者2024-09-09
淺談python中的__init__、__new__和__call__方法
這篇文章主要給大家介紹了關于python中__init__、__new__和__call__方法的相關資料，文中通過示例代碼介紹的非常詳細，對大家具有一定的參考學習價值，需要的朋友可以參考學習，下面來跟著小編一起看看吧。2017-07-07
這篇文章主要介紹了從Python程序中訪問Java類的簡單示例,包括給出了在安卓開發(fā)中的一個短小示例,需要的朋友可以參考下2015-04-04
在實際項目中,往往有這樣的需求:對采集到的數(shù)據(jù)進行數(shù)據(jù)處理(曲線擬合),再計算出一些想要的參數(shù),比如峰值/dip值/周期等等,下面這篇文章主要給大家介紹了關于如何利用Python擬合函數(shù)曲線的相關資料,需要的朋友可以參考下2022-04-04
Pandas 處理DataFrame中的inf值實現(xiàn)
Inf 表示正無窮大或負無窮大,通常是在數(shù)學計算中產(chǎn)生的結(jié)果,本文主要介紹了Pandas 處理DataFrame中的inf值實現(xiàn),具有一定的參考價值,感興趣的可以了解一下2024-04-04
numpy.ndarray 交換多維數(shù)組(矩陣)的行/列方法
今天小編就為大家分享一篇numpy.ndarray 交換多維數(shù)組(矩陣)的行/列方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2018-08-08
解決pandas .to_excel不覆蓋已有sheet的問題
今天小編就為大家分享一篇解決pandas .to_excel不覆蓋已有sheet的問題，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2018-12-12