使用Python更換外網(wǎng)IP的方法
在進行數(shù)據(jù)抓取時,經(jīng)常會遇到IP被限制的情況,常見的解決方案是搭建代理IP池,或購買IP代理的服務。除此之外,還有一個另外的方法就是使用家里的寬帶網(wǎng)絡進行抓取。由于家里的寬帶每次斷開重新連接時都會分配一個新的IP,所以在我們抓取數(shù)據(jù)的時候,判斷當IP被禁掉時,立即在路由器中進行斷開重新連接操作??紤]到人工操作比較繁瑣,另外也不可能一直盯著執(zhí)行的程序,就考慮使用Python自動多路由器進行設(shè)置。
以下代碼為針對家里的TP-Link進行的設(shè)置,其他路由器的設(shè)置原理也應該一樣。
import base64, requests, time, re
base_url = 'http://192.168.1.1'
user = 'admin'
pwd = 'password'
headers = {
'Accept': '*/*',
'User-Agent': 'Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 6.1; WOW64; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; .NET4.0C; .NET4.0E)',
'Referer': base_url + '/userRpm/StatusRpm.htm',
'Cookie': 'Authorization=Basic ' + base64.b64encode((user + ':' + pwd).encode(encoding='utf-8')).decode(
encoding='utf-8')
}
def get_ip():
url = "http://2018.ip138.com/ic.asp"
r = requests.get(url)
txt = r.text
ip = txt[txt.find("[") + 1: txt.find("]")]
return ip
def get_ip_status():
url = base_url + "/userRpm/StatusRpm.htm"
r = requests.get(url=url, headers=headers)
pattern = re.compile('(\d+\.\d+\.\d+\.\d+)')
ip = re.findall(pattern,r.text)
return ip[3]
def change_ip():
url = base_url + '/userRpm/StatusRpm.htm?Disconnect=%B6%CF%20%CF%DF&wan=1'
requests.get(url=url, headers=headers)
while True:
time.sleep(5)
new_ip = get_ip_status()
if new_ip != '0.0.0.0':
break
if __name__ == "__main__":
change_ip()
以上代碼已經(jīng)經(jīng)過測試,能夠正常使用。希望對大家的學習有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
Python 執(zhí)行字符串表達式函數(shù)(eval exec execfile)
今天在網(wǎng)上搜尋一些應用的例子時,發(fā)現(xiàn)有人用TK僅僅幾行代碼就寫了個簡易的計算器,驚為天人。回憶起剛學軟件技術(shù)基礎(chǔ)時編寫簡易計算器的艱辛,頓時淚流滿面2014-08-08
Python中的google authenticator認證過程
文章介紹了使用Python 3.7生成Google Authenticator所需密鑰的步驟,包括使用pyotp模塊生成密鑰、生成二維碼圖片以及通過客戶端掃描二維碼進行二次認證的實現(xiàn)原理2024-11-11
關(guān)于pyinstaller?打包多個py文件的問題
這篇文章主要介紹了pyinstaller?打包多個py文件及遇到的問題,本文通過實例代碼給大家詳細介紹,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下2022-10-10
Python數(shù)值求解微分方程方法(歐拉法,隱式歐拉)
這篇文章主要介紹了Python數(shù)值求解微分方程方法(歐拉法,隱式歐拉),文章圍繞主題展開詳細的內(nèi)介紹,具有一定的參考價值,需要的小伙伴可以參考一下2022-09-09
Python爬蟲實現(xiàn)網(wǎng)頁信息抓取功能示例【URL與正則模塊】
這篇文章主要介紹了Python爬蟲實現(xiàn)網(wǎng)頁信息抓取功能,涉及Python使用URL與正則模塊針對網(wǎng)頁信息的讀取與匹配相關(guān)操作技巧,需要的朋友可以參考下2017-05-05
使用Python獲取網(wǎng)段IP個數(shù)以及地址清單的方法
今天小編就為大家分享一篇使用Python獲取網(wǎng)段IP個數(shù)以及地址清單的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-11-11
Python MySQL如何通過Binlog獲取變更記錄恢復數(shù)據(jù)
本文介紹了如何使用Python和pymysqlreplication庫通過MySQL的二進制日志(Binlog)獲取數(shù)據(jù)庫的變更記錄,并展示了一個簡單的Python腳本,該腳本讀取Binlog事件并打印出插入、更新和刪除操作的SQL語句,此外,還提到可以使用pandas將結(jié)果輸出到Excel表格中進行數(shù)據(jù)分析處理2025-01-01

