關(guān)于python簡(jiǎn)單的爬蟲操作(requests和etree)
更新時(shí)間：2023年04月18日 09:30:23 作者：IT之一小佬
這篇文章主要介紹了關(guān)于python簡(jiǎn)單的爬蟲操作(requests和etree),文中提供了實(shí)現(xiàn)代碼,需要的朋友可以參考下
虎撲體育-NBA球員得分?jǐn)?shù)據(jù)排行 第1頁
示例代碼：
import requests
from lxml import etree
url = 'https://nba.hupu.com/stats/players'
headers = {
"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/109.0.0.0 Safari/537.36"
}
res = requests.get(url=url, headers=headers)
print(res)
# 處理請(qǐng)求結(jié)果
e = etree.HTML(res.text)
# 解析響應(yīng)的數(shù)據(jù)
player = e.xpath('//*[@id="data_js"]/div[4]/div/table/tbody/tr/td[2]/a/text()')
team = e.xpath('//*[@id="data_js"]/div[4]/div/table/tbody/tr/td[3]/a/text()')
hit_rate = e.xpath('//*[@id="data_js"]/div[4]/div/table/tbody/tr/td[6]/text()')[1:]
score = e.xpath('//*[@id="data_js"]/div[4]/div/table/tbody/tr/td[4]/text()')[1:]
for p, t, h, s in zip(player, team, hit_rate, score):
print(f"隊(duì)員:{p},球隊(duì):{t},命中率:{h},得分:{s}")運(yùn)行結(jié)果：
到此這篇關(guān)于關(guān)于python簡(jiǎn)單的爬蟲操作(requests和etree)的文章就介紹到這了,更多相關(guān)python爬蟲操作requests和etree內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
這篇文章主要介紹了Python遞歸實(shí)現(xiàn)漢諾塔算法,結(jié)合實(shí)例形式分析了漢諾塔算法的原理、實(shí)現(xiàn)步驟與相關(guān)操作技巧,需要的朋友可以參考下2018-03-03
pytorch中的matmul與mm,bmm區(qū)別說明
這篇文章主要介紹了pytorch中的matmul與mm,bmm區(qū)別說明，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教2021-05-05
Django用戶認(rèn)證系統(tǒng)如何實(shí)現(xiàn)自定義
這篇文章主要介紹了Django用戶認(rèn)證系統(tǒng)如何實(shí)現(xiàn)自定義,文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-11-11
Django框架之中間件MiddleWare的實(shí)現(xiàn)
這篇文章主要介紹了Django框架之中間件MiddleWare的實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-12-12
這篇文章主要介紹了matplotlib畫圖之修改坐標(biāo)軸刻度問題，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教2022-11-11
這篇文章主要介紹了Python中字符串的常見操作技巧,結(jié)合實(shí)例形式總結(jié)分析了Python針對(duì)字符串的反轉(zhuǎn)、編碼轉(zhuǎn)換、進(jìn)制轉(zhuǎn)換及運(yùn)算等常用技巧,需要的朋友可以參考下2016-07-07
在Python編程中,處理字符編碼和亂碼問題是一個(gè)常見的挑戰(zhàn),特別是在處理文本數(shù)據(jù)、文件輸入/輸出和網(wǎng)絡(luò)通信時(shí),可能會(huì)遇到各種字符編碼問題,本文章將深入探討Python中的亂碼問題,解釋其原理,并提供解決辦法,以確保你的應(yīng)用程序能夠正確處理各種編碼情況2023-12-12
這篇文章主要為大家詳細(xì)介紹了Python中with語句和上下文管理器的具體使用方法，文中的示例代碼講解詳細(xì)，感興趣的小伙伴可以了解一下2023-04-04
本文主要介紹了Python中reduce函數(shù)詳解，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-06-06
Python自然語言處理之snownlp模塊介紹、安裝與常見操作實(shí)戰(zhàn)案例
SnowNLP是一個(gè)針對(duì)中文文本處理的Python庫,提供分詞、詞性標(biāo)注、情感分析等功能,它基于自然語言處理技術(shù),能夠處理unicode編碼的文本,這篇文章主要介紹了Python自然語言處理之snownlp模塊介紹、安裝與常見操作的相關(guān)資料,需要的朋友可以參考下2024-11-11