簡單談談Python的pycurl模塊
pycurl是一個用c語言編寫的libcurl Python實現(xiàn),功能非常強大,支持操作協(xié)議有FTP,HTTP,HTTPS,TELNET等。
模塊的常用方法說明:
close()方法,對應libcurl包中的curl_easy_cleanup方法,無參數(shù),實現(xiàn)關閉、回收Curl對象。
·perform()方法,對應libcurl包中的curl_easy_perform方法,無參數(shù),實現(xiàn)Curl對象請求的提交。
·setopt(option,value)方法,對應libcurl包中的curl_easy_setopt方法,參數(shù)option是通過libcurl的常量來指定的.參數(shù)value的值會依賴option,可以是一個字符串、整型、長整型、文件對象、列表或函數(shù)等
pycurl.Curl() #創(chuàng)建一個curl對象
c.setopt(pycurl.CONNECTTIMEOUT,5) #連接的等待時間,設置為0則不等待
c.setopt(pycurl.TIMEOUT,5) #請求超時時間
c.setopt(pycurl.NOPROGRESS,0) #是否屏蔽下載進度條,非0則屏蔽
c.setopt(pycurl.MAXREDIRS,5) #指定HTTP重定向的最大數(shù)
c.setopt(pycurl.FORBID_REUSE,1) #完成交互后強制斷開連接,不重用
c.setopt(pycurl.FRESH_CONNECT,1) #強制獲取新的連接,即替代緩存中的連接
c.setopt(pycurl.DNS_CACHE_TIMEOUT,60) #設置保存DNS信息的時間,默認為120秒
c.setopt(pycurl.URL,"http://www.baidu.com") #指定請求的URL
c.setopt(pycurl.USERAGENT,"Mozilla/5.2(compatible;MSIE6.0;WindowsNT5.1;SV1;.NETCLR1.1.4322;.NETCLR2.0.50324)")#配置請求HTTP頭的User-Agent
c.setopt(pycurl.HEADERFUNCTION,getheader) #將返回的HTTPHEADER定向到回調函數(shù)getheader
c.setopt(pycurl.WRITEFUNCTION,getbody) #將返回的內容定向到回調函數(shù)getbody
c.setopt(pycurl.WRITEHEADER,fileobj) #將返回的HTTPHEADER定向到fileobj文件對象
c.setopt(pycurl.WRITEDATA,fileobj) #將返回的HTML內容定向到fileobj文件對象
·getinfo(option)方法,對應libcurl包中的curl_easy_getinfo方法,參數(shù)option是通過libcurl的常量來指定的
c=pycurl.Curl() #創(chuàng)建一個curl對象
c.getinfo(pycurl.HTTP_CODE) #返回的HTTP狀態(tài)碼
c.getinfo(pycurl.TOTAL_TIME) #傳輸結束所消耗的總時間
c.getinfo(pycurl.NAMELOOKUP_TIME) #DNS解析所消耗的時間
c.getinfo(pycurl.CONNECT_TIME) #建立連接所消耗的時間
c.getinfo(pycurl.PRETRANSFER_TIME) #從建立連接到準備傳輸所消耗的時間
c.getinfo(pycurl.STARTTRANSFER_TIME) #從建立連接到傳輸開始消耗的時間
c.getinfo(pycurl.REDIRECT_TIME) #重定向所消耗的時間
c.getinfo(pycurl.SIZE_UPLOAD) #上傳數(shù)據包大小
c.getinfo(pycurl.SIZE_DOWNLOAD) #下載數(shù)據包大小
c.getinfo(pycurl.SPEED_DOWNLOAD) #平均下載速度
c.getinfo(pycurl.SPEED_UPLOAD) #平均上傳速度
c.getinfo(pycurl.HEADER_SIZE) #HTTP頭部大小
相關文章
關于數(shù)據分析之滾動窗口pandas.DataFrame.rolling方法
Pandas庫中的rolling方法是數(shù)據處理中常用的功能,它允許用戶對數(shù)據進行滾動窗口(滑動窗口)操作,通過指定窗口大小,可以使用不同的聚合函數(shù)對窗口內的數(shù)據進行計算,例如最大值、最小值、平均值、中位數(shù)等,此外,rolling方法還可以計算方差、標準差、偏度、峰度2024-09-09
Python腳本實現(xiàn)DNSPod DNS動態(tài)解析域名
這篇文章主要介紹了Python腳本實現(xiàn)DNSPod DNS動態(tài)解析域名,本文直接給出實現(xiàn)代碼,需要的朋友可以參考下2015-02-02
python爬蟲爬取監(jiān)控教務系統(tǒng)的思路詳解
這篇文章主要介紹了python爬蟲監(jiān)控教務系統(tǒng),主要實現(xiàn)思路是對已有的成績進行處理,變?yōu)閘ist集合,本文通過實例代碼給大家介紹的非常詳細,需要的朋友可以參考下2020-01-01

