最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

python爬蟲selenium模塊詳解

 更新時間:2021年03月30日 09:42:04   作者:南岸青梔*  
這篇文章主要介紹了python爬蟲selenium模塊詳解,本文給大家介紹的非常詳細,對大家的學(xué)習或工作具有一定的參考借鑒價值,需要的朋友可以參考下

selenium模塊

selenium基本概念

selenium優(yōu)勢

  • 便捷的獲取網(wǎng)站中動態(tài)加載的數(shù)據(jù)
  • 便捷實現(xiàn)模擬登陸

selenium使用流程:

1.環(huán)境安裝:pip install selenium

2.下載一個瀏覽器的驅(qū)動程序(谷歌瀏覽器)

3.實例化一個瀏覽器對象

基本使用

代碼

from selenium import webdriver
from lxml import etree
from time import sleep

if __name__ == '__main__':

 bro = webdriver.Chrome(r"E:\google\Chrome\Application\chromedriver.exe")
 bro.get(url='http://scxk.nmpa.gov.cn:81/xk/')

 page_text = bro.page_source
 tree = etree.HTML(page_text)
 li_list = tree.xpath('//*[@id="gzlist"]/li')
 for li in li_list:
  name = li.xpath('./dl/@title')[0]
  print(name)
 sleep(5)
 bro.quit()

基于瀏覽器自動化的操作

代碼

#編寫基于瀏覽器自動化的操作代碼

- 發(fā)起請求: get(url)

- 標簽定位: find系列的方法

- 標簽交互: send_ keys( 'xxx' )

- 執(zhí)行js程序: excute_script('jsCod')

- 前進,后退: back(),forward( )

- 關(guān)閉瀏覽器: quit()

代碼

https://www.taobao.com/

from selenium import webdriver
from time import sleep

bro = webdriver.Chrome(executable_path=r"E:\google\Chrome\Application\chromedriver.exe")

bro.get(url='https://www.taobao.com/')

#標簽定位
search_input = bro.find_element_by_id('q')
sleep(2)
#執(zhí)行一組js代碼,使得滾輪向下滑動
bro.execute_script('window.scrollTo(0,document.body.scrollHeight)')
sleep(2)
#標簽交互
search_input.send_keys('女裝')
button = bro.find_element_by_class_name('btn-search')
button.click()

bro.get('https://www.baidu.com')
sleep(2)
bro.back()
sleep(2)
bro.forward()
sleep(5)
bro.quit()

selenium處理iframe:

- 如果定位的標簽存在于iframe標簽之中,則必須使用switch_to.frame(id)

- 動作鏈(拖動) : from selenium. webdriver import ActionChains
	- 實例化一個動作鏈對象: action = ActionChains (bro)
	- click_and_hold(div) :長按且點擊操作
	- move_by_offset(x,y)
	- perform( )讓動作鏈立即執(zhí)行
	- action.release( )釋放動作鏈對象

代碼

https://www.runoob.com/try/try.php?filename=jqueryui-api-droppable

from selenium import webdriver
from time import sleep
from selenium.webdriver import ActionChains
bro = webdriver.Chrome(executable_path=r"E:\google\Chrome\Application\chromedriver.exe")

bro.get('https://www.runoob.com/try/try.php?filename=jqueryui-api-droppable')

bro.switch_to.frame('iframeResult')

div = bro.find_element_by_id('draggable')

#動作鏈
action = ActionChains(bro)
action.click_and_hold(div)

for i in range(5):
 action.move_by_offset(17,0).perform()
 sleep(0.3)

#釋放動作鏈
action.release()

bro.quit()

selenium模擬登陸QQ空間

代碼

https://qzone.qq.com/

from selenium import webdriver
from time import sleep


bro = webdriver.Chrome(executable_path=r"E:\google\Chrome\Application\chromedriver.exe")
bro.get('https://qzone.qq.com/')
bro.switch_to.frame("login_frame")

switcher = bro.find_element_by_id('switcher_plogin')
switcher.click()

user_tag = bro.find_element_by_id('u')
password_tag = bro.find_element_by_id('p')
user_tag.send_keys('1234455')
password_tag.send_keys('qwer123')
sleep(1)

but = bro.find_element_by_id('login_button')
but.click()

無頭瀏覽器和規(guī)避檢測

代碼

from selenium import webdriver
from time import sleep
#實現(xiàn)無可視化界面
from selenium.webdriver.chrome.options import Options
#實現(xiàn)規(guī)避檢測
from selenium.webdriver import ChromeOptions

#實現(xiàn)無可視化界面
chrome_options = Options()
chrome_options.add_argument('--headless')
chrome_options.add_argument('--disable-gpu')
#實現(xiàn)規(guī)避檢測
option = ChromeOptions()
option.add_experimental_option('excludeSwitches',['enable-automation'])

bro = webdriver.Chrome(executable_path=r"E:\google\Chrome\Application\chromedriver.exe",chrome_options=chrome_options,options=option)

bro.get('https://www.baidu.com')
print(bro.page_source)
sleep(2)
bro.quit()

到此這篇關(guān)于python爬蟲selenium模塊詳解的文章就介紹到這了,更多相關(guān)python爬蟲selenium模塊內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • python運行環(huán)境在新舊電腦間遷移的三種方法

    python運行環(huán)境在新舊電腦間遷移的三種方法

    環(huán)境部署或遷移是一項簡單而又考驗應(yīng)對能力的一項工作,這篇文章主要給大家介紹了關(guān)于python運行環(huán)境在新舊電腦間遷移的三種方法,文中通過代碼介紹的非常詳細,需要的朋友可以參考下
    2024-08-08
  • 在TensorFlow中屏蔽warning的方式

    在TensorFlow中屏蔽warning的方式

    今天小編就為大家分享一篇在TensorFlow中屏蔽warning的方式,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2020-02-02
  • python django model聯(lián)合主鍵的例子

    python django model聯(lián)合主鍵的例子

    今天小編就為大家分享一篇python django model聯(lián)合主鍵的例子,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2019-08-08
  • Python中join函數(shù)簡單代碼示例

    Python中join函數(shù)簡單代碼示例

    這篇文章主要介紹了Python中join函數(shù)簡單代碼示例,具有一定借鑒價值,需要的朋友可以參考下
    2018-01-01
  • python提取具有某種特定字符串的行數(shù)據(jù)方法

    python提取具有某種特定字符串的行數(shù)據(jù)方法

    今天小編就為大家分享一篇python提取具有某種特定字符串的行數(shù)據(jù)方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2018-12-12
  • Python3 合并二叉樹的實現(xiàn)

    Python3 合并二叉樹的實現(xiàn)

    這篇文章主要介紹了Python3 合并二叉樹的實現(xiàn),文中通過示例代碼介紹的非常詳細,對大家的學(xué)習或者工作具有一定的參考學(xué)習價值,需要的朋友們下面隨著小編來一起學(xué)習學(xué)習吧
    2019-09-09
  • 使用Python實現(xiàn)控制攝像頭的方法詳解

    使用Python實現(xiàn)控制攝像頭的方法詳解

    當今,隨著計算機技術(shù)的發(fā)展,攝像頭已經(jīng)成為了人們生活中不可或缺的一部分。而Python作為一種流行的編程語言,也可以輕松地控制和操作攝像頭。本文將介紹如何使用Python中的常用庫(例如OpenCV和Tkinter)來控制和操作攝像頭,需要的可以參考一下
    2023-03-03
  • python學(xué)習數(shù)據(jù)結(jié)構(gòu)實例代碼

    python學(xué)習數(shù)據(jù)結(jié)構(gòu)實例代碼

    數(shù)據(jù)結(jié)構(gòu)就是用來將數(shù)據(jù)組織在一起的結(jié)構(gòu)。換句話說,數(shù)據(jù)結(jié)構(gòu)是用來存儲一系列關(guān)聯(lián)數(shù)據(jù)的東西。在Python中有四種內(nèi)建的數(shù)據(jù)結(jié)構(gòu),分別是List、Tuple、Dictionary以及Set。本文將通過實例來介紹這些數(shù)據(jù)結(jié)構(gòu)的用法。
    2015-05-05
  • Pytorch訓(xùn)練過程出現(xiàn)nan的解決方式

    Pytorch訓(xùn)練過程出現(xiàn)nan的解決方式

    今天小編就為大家分享一篇Pytorch訓(xùn)練過程出現(xiàn)nan的解決方式,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2020-01-01
  • IPython?8.0?Python?命令行交互工具

    IPython?8.0?Python?命令行交互工具

    這篇文章主要介紹了IPython?8.0?Python?命令行交互工具,IPython?是?Python?的原生交互式?shell?的增強版,可以完成許多不同尋常的任務(wù),下面我們就拉看看文章具體的介紹內(nèi)容吧
    2022-01-01

最新評論

肇庆市| 日喀则市| 郁南县| 焦作市| 太仆寺旗| 麦盖提县| 花垣县| 台安县| 惠州市| 勃利县| 宜良县| 开原市| 汉寿县| 屯门区| 霍山县| 兴义市| 台北市| 平阳县| 沅陵县| 宜兰县| 徐汇区| 天门市| 运城市| 桓台县| 肇庆市| 什邡市| 石屏县| 民乐县| 平罗县| 平和县| 景德镇市| 彭州市| 广西| 大埔县| 綦江县| 平江县| 青海省| 桦甸市| 彩票| 民勤县| 黑水县|