python檢查URL是否正常訪問的小技巧
更新時間：2017年02月25日 17:00:08 作者：程序猿全敏
檢查一個URL是否正常很容易，如果檢查2000個URL，或者是大批量的URL怎么辦？這篇文章就為大家介紹了python檢查URL是否正常訪問的小技巧，具有一定的參考價值，感興趣的小伙伴們可以參考一下
今天，項目經(jīng)理問我一個問題，問我這里有2000個URL要檢查是否能正常打開，其實我是拒絕的，我知道因為要寫代碼了，正好學了點Python，一想，python處理起來容易，就選了python，開始把思路想好：
1.首先2000個URL?？梢苑旁谝粋€txt文本內(nèi)
2.通過python 把內(nèi)容內(nèi)的URL一條一條放進數(shù)組內(nèi)
3.打開一個模擬的瀏覽器，進行訪問。
4.如果正常訪問就輸出正常，錯誤就輸出錯誤
直接簡單粗暴甩代碼。因為涉及到隱私，圖片打了碼
import urllib.request
import time
opener = urllib.request.build_opener()
opener.addheaders = [('User-agent', 'Mozilla/49.0.2')]
#這個是你放網(wǎng)址的文件名，改過來就可以了
file = open('test.txt')
lines = file.readlines()
aa=[]
for line in lines:
temp=line.replace('\n','')
aa.append(temp)
print(aa)
print('開始檢查：')
for a in aa:
tempUrl = a
try :
opener.open(tempUrl)
print(tempUrl+'沒問題')
except urllib.error.HTTPError:
print(tempUrl+'=訪問頁面出錯')
time.sleep(2)
except urllib.error.URLError:
print(tempUrl+'=訪問頁面出錯')
time.sleep(2)
time.sleep(0.1)
效果圖：
以上就是本文的全部內(nèi)容，希望對大家的學習有所幫助，也希望大家多多支持腳本之家。
相關文章
Python本地cache不當使用導致內(nèi)存泄露的問題分析與解決
最近在項目開發(fā)中遇到了本地cache不當使用導致的一個內(nèi)存泄露問題,所以本文主要分析了問題出現(xiàn)的原因已經(jīng)解決方法,需要的小伙伴可以參考下2023-08-08
最近無事看到了電腦桌面又想到了最近入門的pyqt5,所以下面這篇文章主要給大家介紹了關于如何使用pyqt實現(xiàn)桌面歌詞功能的相關資料,文中通過示例代碼介紹的非常詳細,需要的朋友可以參考下2022-07-07
這篇文章主要為大家詳細介紹了如何利用python發(fā)送和接收郵件，具有一定的參考價值，感興趣的小伙伴們可以參考一下2016-09-09
這篇文章主要介紹了Python Selenium常見的報錯問題以及措施,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2024-05-05
python 實現(xiàn)手機自動撥打電話的方法(通話壓力測試)
今天小編就為大家分享一篇python 實現(xiàn)手機自動撥打電話的方法(通話壓力測試)，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-08-08
本篇文章主要給大家詳細講述了Python核心對象類型之元組及文件的相關內(nèi)容，對此有興趣的學習下。2018-02-02
這篇文章主要介紹了python中xrange用法,實例分析了xrange的功能、作用以及與range在使用中的區(qū)別,具有一定參考借鑒價值,需要的朋友可以參考下2015-04-04
這篇文章主要介紹了pandas 層次化索引的實現(xiàn)方法，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2019-07-07
pytorch加載語音類自定義數(shù)據(jù)集的方法教程
這篇文章主要給大家介紹了關于pytorch加載語音類自定義數(shù)據(jù)集的相關資料，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2020-11-11
Python實戰(zhàn)之實現(xiàn)獲取動態(tài)圖表
這篇文章主要介紹了利用Python實現(xiàn)動態(tài)化圖表，文中的示例代碼介紹詳細，對我們的工作或?qū)W習有一定的價值，感興趣的同學可以學習一下2021-12-12