Python多線程實(shí)現(xiàn)支付模擬請(qǐng)求過(guò)程解析
思路:
隊(duì)列使用說(shuō)明:
- multiprocessing.Queue()#用于進(jìn)程間通信,單主進(jìn)程與子進(jìn)程無(wú)法通信(使用進(jìn)程池時(shí)盡量不要使用這個(gè))
- multiprocessing.Manager().Queue()#用于主子進(jìn)程通信,通過(guò)進(jìn)程池(pool)創(chuàng)建的進(jìn)程可以數(shù)據(jù)共享
- queue.Queue()#用于線程間通信,同一進(jìn)程內(nèi)的數(shù)據(jù)可以共享
1.從數(shù)據(jù)庫(kù)里獲取待支付的訂單
2.將獲取出來(lái)的數(shù)據(jù)添加至隊(duì)列(queue.Queue()),并在函數(shù)中返回消息隊(duì)列的長(zhǎng)度
3.根據(jù)隊(duì)列長(zhǎng)度創(chuàng)建對(duì)應(yīng)的線程數(shù)量
4.把創(chuàng)建的線程放在list
5.依次啟動(dòng)
6.最后等待主線程執(zhí)行完結(jié)束,統(tǒng)計(jì)函數(shù)運(yùn)行時(shí)長(zhǎng)
代碼如下
import asyncio
import sys
from queue import Queue
sys.path.append("../")
from tool.__init__ import *
from tool.decorator_token import *
import time
from threading import Thread,Lock
class doWeChatNotify(BaseTest):
def __init__(self):
super().__init__()
self.limit_num=100 #查詢記錄條數(shù)
self.WeChatNotify_sql='''select order_id,order_sn from fw_order where `status`=0
and course_id=1569 ORDER BY create_time desc limit %d ;'''%(self.limit_num)
self.fwh_test_api=fwh_test_api
self.data = self.my_op.sql_operation_fwh(self.WeChatNotify_sql)
self.fwh_order_dict = {}
self.que = Queue()
@token_fwh#驗(yàn)證token有效性
def get_fwh_token_list(self):
token_list=self.fwh_token.loadTokenList()
return token_list
@token_crm#驗(yàn)證token有 def get_crm_token_list(self) token_list=self.token.loadTokenList()
return token_list
def testDoWeChatNotify(self):
DoWeChatNotify_file='../tokenFileAndtxtFiles'+'/'+"DoWeChatNotify_asynchronousPay.txt"
with open(DoWeChatNotify_file,'a',encoding='utf=-8') as file:
str_first="order_id\t"+"order_sn\t\n" #文件首行數(shù)據(jù)
file.write(str_first)
fwh_order_id_list, fwh_order_sn_list = [], []
if self.data!=():
for a in self.data:
fwh_order_id=a['order_id']
fwh_order_sn=a['order_sn']
self.fwh_order_dict[fwh_order_id]=fwh_order_sn
with open(DoWeChatNotify_file,'a',encoding='utf-8') as file2:#文件寫入
str_DoWeChatNotifyInfo=str(fwh_order_id)+'\t'+str(fwh_order_sn)+'\t\n'
file2.flush() #清除緩沖區(qū)
file2.write(str_DoWeChatNotifyInfo)
self.que.put(self.fwh_order_dict)#將數(shù)據(jù)添加至隊(duì)列
#關(guān)閉數(shù)據(jù)庫(kù)連接
# self.my_op.close_db_fwh()
# self.my_op.close_db()
return self.que.qsize()#返回隊(duì)列數(shù)量
def asynchronousPay(self,order_id,order_sn):
count=1
count_num=50
token_list=self.get_fwh_token_list()
if (self.data!=()):
headers_form_urlencoded['token']=token_list[0]
url_wechat_success_huidiao=self.fwh_test_api+'/index/Order/doWeChatNotify'
data_wechat_success_huidiao=self.data_to_str.requestDataToStr_firefoxAndChrome_fwh('''order_sn:{}
order_id:{}
meth_id:4
timestamp:157129653969
sign:0687b01b300b9e300d3996a9d2173f1380973e5a'''.format(order_sn,order_id))
request_wechat_success_huidiao=requests.post(url=url_wechat_success_huidiao,headers=headers_form_urlencoded,data=data_wechat_success_huidiao)
response_wechat_success_huidiao=request_wechat_success_huidiao.json()
if '訂單狀態(tài)錯(cuò)誤,非待支付訂單' in response_wechat_success_huidiao['msg']:
print(data_wechat_success_huidiao)
else:
print('待支付訂單為空')
def run_multithreading(self):#多線程
threads = []#存放所有的線程
nloops = list(range(self.testDoWeChatNotify()))#獲取隊(duì)列數(shù)量
if len(nloops)>0:
for i,k in zip(nloops,self.que.get().items()):#根據(jù)隊(duì)列數(shù)量來(lái)創(chuàng)建線程
t = Thread(target=self.asynchronousPay,args=(k[0],k[1]))
threads.append(t)
for s in nloops: # 開(kāi)始多線程
threads[s].start()
for j in nloops: # 等待所有線程完成
threads[j].join()
else:
print("隊(duì)列數(shù)量為空")
if __name__=="__main__":
start_time = time.time() # 計(jì)算程序開(kāi)始時(shí)間
wechfy=doWeChatNotify()
wechfy.run_multithreading()#多線程
print('程序耗時(shí){:.2f}'.format(time.time() - start_time)) # 計(jì)算程序總耗時(shí)
總結(jié):親測(cè)運(yùn)行時(shí)間還是會(huì)快很多,單線程支付100個(gè)訂單四十幾秒的樣子,多線程運(yùn)行不用join2.x秒,用join八秒的樣子,還有很大的優(yōu)化空間,因?yàn)檫\(yùn)行時(shí)會(huì)創(chuàng)建100個(gè)線程
以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
Python-jenkins 獲取job構(gòu)建信息方式
這篇文章主要介紹了Python-jenkins 獲取job構(gòu)建信息方式,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-05-05
Python GUI教程之在PyQt5中使用數(shù)據(jù)庫(kù)的方法
Qt平臺(tái)對(duì)SQL編程有著良好的支持,PyQt5也一并繼承了過(guò)來(lái),這篇文章主要介紹了Python GUI教程之在PyQt5中使用數(shù)據(jù)庫(kù)的方法,需要的朋友可以參考下2021-09-09
使用Python創(chuàng)建簡(jiǎn)單的HTTP服務(wù)器的方法步驟
這篇文章主要介紹了使用Python創(chuàng)建簡(jiǎn)單的HTTP服務(wù)器的方法步驟,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-04-04
python 使用多線程創(chuàng)建一個(gè)Buffer緩存器的實(shí)現(xiàn)思路
這篇文章主要介紹了python 使用多線程創(chuàng)建一個(gè)Buffer緩存器的實(shí)現(xiàn)思路,本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2020-07-07
python的繪圖工具matplotlib使用實(shí)例
這篇文章主要介紹了python的繪圖工具matplotlib使用實(shí)例,需要的朋友可以參考下2014-07-07
python3中的函數(shù)與參數(shù)及空值問(wèn)題
這篇文章主要介紹了python3-函數(shù)與參數(shù)以及空值,本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2022-11-11
python之Character string(實(shí)例講解)
下面小編就為大家?guī)?lái)一篇python之Character string(實(shí)例講解)。小編覺(jué)得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2017-09-09
Pycharm添加虛擬解釋器報(bào)錯(cuò)問(wèn)題解決方案
這篇文章主要介紹了Pycharm添加虛擬解釋器報(bào)錯(cuò)問(wèn)題解決方案,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-10-10
python 實(shí)現(xiàn)多維數(shù)組轉(zhuǎn)向量
今天小編就為大家分享一篇python 實(shí)現(xiàn)多維數(shù)組轉(zhuǎn)向量,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-11-11

