python爬蟲parsel-css選擇器的具體用法
parsel 比 lxml 功能強(qiáng)大，它內(nèi)部不光集成有xpath語法，也集成了css和re語法，相比而言，css與re通用性更強(qiáng)，它倆的性能完全不輸xpath，特別是re，速度更快，難度也高！
引入
import parsel import requests
語法使用
url = 'http://www.baidu.com' response = requests.get(url) selector = parsel.Selector(response.text)
選擇所有元素
selector.css('*')1、選擇article元素
html = selector.css('article')
# get(), getall() , extract_first(), extract() 都可以2、選擇id為container的元素
selector.css('#container')3、選擇所有class包含container的元素
selector.css('.container')4、選取所有div下所有a元素
selector.css('div a')5、提取標(biāo)簽title列表
title1 = selector.css('title').extract()
title2 = selector.css('title').extract_first()6、提取標(biāo)簽p里的文本內(nèi)容
text = selector.css('p::text').extract()7、提取標(biāo)簽div里的所有文本內(nèi)容
data = selector.css('div.post-content *::text').extract()8、提取標(biāo)簽里的URL：標(biāo)簽名::attr(屬性名)
url = selector.css('div.post-content img::attr(src)').extract()9、選取所有擁有title屬性的a元素
a = selector.css('a[title]').getall()拓展語法
選取ul后面的第一個(gè)p元素
selector.css('ul + p')選取與ul相鄰的所有p元素
selector.css('ul ~ p')選取下面第二個(gè)標(biāo)簽，如果是a的話則選取，不是則不取
selector.css('a:nth-child(2)')選取第偶數(shù)個(gè)a元素
selector.css('a:nth-child(2n)')選取第奇數(shù)個(gè)a元素
selector.css('a:nth-child(2n+1)') 選取class為multi-chosen的li的所有a元素
selector.css('li.multi-chosen > a') 選取所有href屬性為www.baidu.com的a元素
selector.css('a[href=”www.baidu.com”]')選取所有href屬性值中包含www.baidu.com的a元素
a[href*=”www.baidu.com”]
選取所有href屬性值中以http開頭的a元素
a[href^=”http”]
選取所有id為非content-container 的div
div:not(#content-container)
到此這篇關(guān)于python爬蟲parsel-css選擇器的具體用法的文章就介紹到這了,更多相關(guān)python parsel-css選擇器內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
Python數(shù)據(jù)分析之雙色球基于線性回歸算法預(yù)測下期中獎(jiǎng)結(jié)果示例
這篇文章主要介紹了Python數(shù)據(jù)分析之雙色球基于線性回歸算法預(yù)測下期中獎(jiǎng)結(jié)果,涉及Python基于線性回歸算法的數(shù)值運(yùn)算相關(guān)操作技巧,需要的朋友可以參考下2018-02-02
這篇文章主要介紹了python中的super,python中的super，名為超類，可以簡單的理解為執(zhí)行父類的__init__函數(shù)，本文就著重看下super的具體作用，需要的朋友可以參考下2022-03-03
裝飾器(Decorators)是 Python 的一個(gè)重要部分。簡單地說：他們是修改其他函數(shù)的功能的函數(shù)。他們有助于讓我們的代碼更簡短2021-06-06
Python編程pytorch深度卷積神經(jīng)網(wǎng)絡(luò)AlexNet詳解
AlexNet和LeNet的架構(gòu)非常相似。這里我們提供了一個(gè)稍微精簡版本的AlexNet，去除了當(dāng)年需要兩個(gè)小型GPU同時(shí)運(yùn)算的設(shè)計(jì)特點(diǎn)2021-10-10
Python中字符串類型代碼的執(zhí)行函數(shù)——eval()、exec()和compile()詳解
這篇文章主要介紹了Python中字符串類型代碼的執(zhí)行函數(shù)——eval()、exec()和compile(),字符串類型代碼的執(zhí)行函數(shù)有三個(gè)，都是Python的內(nèi)置函數(shù)，下面逐一對這三個(gè)函數(shù)詳細(xì)講解，需要的朋友可以參考下2023-02-02
本篇文章給大家詳細(xì)介紹了python中的生成器用法以及原理，有興趣的朋友參考學(xué)習(xí)下吧。2017-12-12
今天小編就為大家分享一篇python dataframe NaN處理方式，具有很好的參考價(jià)值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-12-12
決策樹(Decision Tree）是在已知各種情況發(fā)生概率的基礎(chǔ)上，通過構(gòu)成決策樹來求取凈現(xiàn)值的期望值大于等于零的概率，評價(jià)項(xiàng)目風(fēng)險(xiǎn)，判斷其可行性的決策分析方法，是直觀運(yùn)用概率分析的一種圖解法2022-09-09
命令行參數(shù)是通過sys.argv[]來獲取的，sys.argv[0]是代碼文件本身的路徑，因此參數(shù)是從1開始的。比如設(shè)置參數(shù)為： spe2008-09-09
Python paramiko模塊使用解析（實(shí)現(xiàn)ssh）
這篇文章主要介紹了Python paramiko模塊使用解析（實(shí)現(xiàn)ssh）,文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2019-08-08