Python3.X 線(xiàn)程中信號(hào)量的使用方法示例
前言
最近在學(xué)習(xí)python，發(fā)現(xiàn)了解線(xiàn)程信號(hào)量的基礎(chǔ)知識(shí)，對(duì)深入理解python的線(xiàn)程會(huì)大有幫助。所以本文將給大家介紹Python3.X線(xiàn)程中信號(hào)量的使用方法，下面話(huà)不多說(shuō)，來(lái)一起看看詳細(xì)的介紹：
方法示例
線(xiàn)程中，信號(hào)量主要是用來(lái)維持有限的資源，使得在一定時(shí)間使用該資源的線(xiàn)程只有指定的數(shù)量
# -*- coding:utf-8 -*-
""" Created by FizLin on 2017/07/23/-下午10:59
mail: https://github.com/Fiz1994
信號(hào)量
maxconnections = 5
...
pool_sema = BoundedSemaphore(value=maxconnections)
Once spawned, worker threads call the semaphore's acquire and release methods when they need to connect to the server:
pool_sema.acquire()
conn = connectdb()
... use connection ...
conn.close()
pool_sema.release()
"""
import threading
import time
import random
sites = ["https://www.baidu.com/", "https://github.com/Fiz1994", "https://stackoverflow.com/",
"https://www.sogou.com/",
"http://english.sogou.com/?b_o_e=1&ie=utf8&fr=common_index_nav&query="] * 20
sites_index = 0
maxconnections = 2
pool_sema = threading.BoundedSemaphore(value=maxconnections)
def test():
with pool_sema:
global sites_index, sites
url = str(sites[sites_index])
k = random.randint(10, 20)
print("爬去： " + url + " 需要時(shí)間 : " + str(k))
sites_index += 1
# print(url)
time.sleep(k)
print('退出 ', url)
for i in range(100):
threading.Thread(target=test).start()
可以發(fā)現(xiàn)該程序中，永遠(yuǎn)只有2個(gè)爬蟲(chóng)是處于活動(dòng)狀態(tài)
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了，希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作能帶來(lái)一定的幫助，如果有疑問(wèn)大家可以留言交流，謝謝大家對(duì)腳本之家的支持。
相關(guān)文章
Python網(wǎng)絡(luò)爬蟲(chóng)與信息提取(實(shí)例講解)
下面小編就為大家?guī)?lái)一篇Python網(wǎng)絡(luò)爬蟲(chóng)與信息提取(實(shí)例講解)。小編覺(jué)得挺不錯(cuò)的，現(xiàn)在就分享給大家，也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2017-08-08
python3翻轉(zhuǎn)字符串里的單詞點(diǎn)的實(shí)現(xiàn)方法
這篇文章主要介紹了python3翻轉(zhuǎn)字符串里的單詞點(diǎn)的實(shí)現(xiàn)方法，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2021-04-04
這篇文章主要介紹了python 爬取壁紙網(wǎng)站的示例，幫助大家更好的理解和學(xué)習(xí)使用python爬蟲(chóng)，感興趣的朋友可以了解下2021-03-03
記一次python 爬蟲(chóng)爬取深圳租房信息的過(guò)程及遇到的問(wèn)題
這篇文章主要介紹了記一次python 爬蟲(chóng)爬取深圳租房信息的過(guò)程，幫助大家更好的理解和學(xué)習(xí)python爬蟲(chóng)，感興趣的朋友可以了解下2020-11-11
本文通過(guò)詳情描述Python 中的可變對(duì)象與不可變對(duì)象來(lái)看兩者的區(qū)別，剛興趣的朋友可以參考下文2021-08-08
Python文件循環(huán)寫(xiě)入行時(shí)防止覆蓋的解決方法
今天小編就為大家分享一篇Python文件循環(huán)寫(xiě)入行時(shí)防止覆蓋的解決方法，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-11-11
Python 抓取數(shù)據(jù)存儲(chǔ)到Redis中的操作
這篇文章主要介紹了Python 抓取數(shù)據(jù)存儲(chǔ)到Redis中的操作，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2020-07-07
python模擬菜刀反彈shell繞過(guò)限制【推薦】
這篇文章主要介紹了利用python模擬菜刀反彈shell繞過(guò)限制,本文給大家介紹的非常詳細(xì)，具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2019-06-06
Python實(shí)現(xiàn)二叉搜索樹(shù)BST的方法示例
這篇文章主要介紹了Python實(shí)現(xiàn)二叉搜索樹(shù)BST的方法示例，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-07-07
詳解Python如何利用Pandas與NumPy進(jìn)行數(shù)據(jù)清洗
許多數(shù)據(jù)科學(xué)家認(rèn)為獲取和清理數(shù)據(jù)的初始步驟占工作的 80%，花費(fèi)大量時(shí)間來(lái)清理數(shù)據(jù)集并將它們歸結(jié)為可以使用的形式。本文將利用 Python 的 Pandas和 NumPy 庫(kù)來(lái)清理數(shù)據(jù)，需要的可以參考一下2022-04-04