最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

Python網(wǎng)絡(luò)爬蟲信息提取mooc代碼實例

 更新時間:2020年03月06日 09:20:09   作者:159566  
這篇文章主要介紹了python網(wǎng)絡(luò)爬蟲與信息提取mooc,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下

實例一--爬取頁面

import requests
url="https//itemjd.com/2646846.html"
try:
 r=requests.get(url)
 r.raise_for_status()
 r.encoding=r.apparent_encoding
 print(r.text[:1000])
except:
 print("爬取失敗")

正常頁面爬取

實例二--爬取頁面

import requests
url="https://www.amazon.cn/gp/product/B01M8L5Z3Y"
try:
 kv={'user-agent':'Mozilla/5.0'}
 r=requests.get(url,headers=kv)
 r.raise_for_status()
 r.encoding=r.apparent_encoding
 print(r.text[1000:2000])
except:
 print("爬取失敗")

對訪問用戶名有限制,模擬瀏覽器對網(wǎng)站請求

實例三--爬取搜索引擎

#百度的關(guān)鍵詞接口:http://www.baidu.com/s?wd=keyword
#360的關(guān)鍵詞接口:http://www.so.com/s?q=keyword
import requests
keyword="python"
try:
 kv={'wd':keyword}
 r=requests.get("http://www.baidu.com/s",params=kv)
 print(r.request.url)
 r.raise_for_status()
 print(len(r.text))
except:
 print("爬取失敗")
--------------------------------------------------
import requests
keyword="python"
try:
 kv={'q':keyword}
 r=requests.get("http://www.so.com/s",params=kv)
 print(r.request.url)
 r.raise_for_status()
 print(len(r.text))
except:
 print("爬取失敗")

實例四--:爬取圖片

import requests
import os
url="http://image.nationalgeographic.com.cn/2017/0211/20170211061910157.jpg"
root="F://pics//"
path=root+url.split('/')[-1]
try:
 if not os.path.exists(root):
  os.mkdir(root)
 if not os.path.exists(path):
  r=requests.get(url)
  with open(path,'wb') as f:
   f.write(r.content)
   f.close()
   print("文件保存成功")
 else:
  print("文件已經(jīng)存在")
except:
 print("爬取失敗")

爬取并保存圖片

實例五--IP地址歸屬地查詢:

http://m.ip138.com/ip.asp?ip=ipaddress

url="http://www.ip138.com/iplookup.asp?ip="
try:
 r=requests.get(url+'202.204.80.112'+'&action=2')
 r.raise_for_status()
 r.encoding=r.apparent_encoding
 print(r.text[-500:])
except:
 print("爬取失敗")

以上就是本文的全部內(nèi)容,希望對大家的學習有所幫助,也希望大家多多支持腳本之家。

相關(guān)文章

  • Python bsonrpc源碼解讀

    Python bsonrpc源碼解讀

    這篇文章主要介紹了Python bsonrpc源碼的相關(guān)資料,幫助大家更好的理解和學習使用python,感興趣的朋友可以了解下
    2021-03-03
  • Python時間模塊datetime、time、calendar的使用方法

    Python時間模塊datetime、time、calendar的使用方法

    這篇文章主要介紹了Python時間模塊的使用方法,主要包括三大模塊datetime、time、calendar,感興趣的小伙伴們可以參考一下
    2016-01-01
  • python中os模塊詳解

    python中os模塊詳解

    os模塊提供了多數(shù)操作系統(tǒng)的功能接口函數(shù).當os模塊被導(dǎo)入后,它會自適應(yīng)于不同的操作系統(tǒng)平臺,如posix或NT系統(tǒng)平臺,os模塊會根據(jù)不同的平臺進行相應(yīng)的操作.本節(jié)內(nèi)容將對os模塊提供的函數(shù)進行詳細的解讀.
    2016-10-10
  • python3將變量輸入的簡單實例

    python3將變量輸入的簡單實例

    在本篇文章里小編給大家整理的是一篇關(guān)于python3將變量輸入的簡單實例內(nèi)容,有需要的朋友們可以參考下。
    2020-08-08
  • 如何解決mmcv無法安裝或安裝之后報錯問題

    如何解決mmcv無法安裝或安裝之后報錯問題

    這篇文章主要介紹了如何解決mmcv無法安裝或安裝之后報錯問題,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教
    2025-04-04
  • Django contenttypes 框架詳解(小結(jié))

    Django contenttypes 框架詳解(小結(jié))

    這篇文章主要介紹了Django contenttypes 框架詳解(小結(jié)),小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧
    2018-08-08
  • python獲取文件路徑、文件名、后綴名的實例

    python獲取文件路徑、文件名、后綴名的實例

    下面小編就為大家分享一篇python獲取文件路徑、文件名、后綴名的實例,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2018-04-04
  • Python實現(xiàn)的簡單線性回歸算法實例分析

    Python實現(xiàn)的簡單線性回歸算法實例分析

    這篇文章主要介紹了Python實現(xiàn)的簡單線性回歸算法,結(jié)合實例形式分析了線性回歸算法相關(guān)原理、功能、用法與操作注意事項,需要的朋友可以參考下
    2018-12-12
  • Windows下PyCharm配置Anaconda環(huán)境(超詳細教程)

    Windows下PyCharm配置Anaconda環(huán)境(超詳細教程)

    這篇文章主要介紹了Windows下PyCharm配置Anaconda環(huán)境,本文給大家分享一篇超詳細教程,通過圖文并茂的形式給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下
    2020-07-07
  • Python any()函數(shù)的使用方法

    Python any()函數(shù)的使用方法

    這篇文章主要介紹了Python any()函數(shù)的使用方法,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧
    2019-10-10

最新評論

海淀区| 沛县| 沅江市| 错那县| 兴宁市| 泰来县| 信丰县| 翁源县| 澄江县| 安岳县| 拉孜县| 河源市| 全南县| 达日县| 区。| 双流县| 余姚市| 油尖旺区| 垫江县| 普格县| 长春市| 墨江| 兴化市| 罗平县| 怀柔区| 滨海县| 徐闻县| 融水| 威远县| 乐都县| 淮南市| 明光市| 武定县| 恭城| 云林县| 长海县| 静宁县| 英吉沙县| 余姚市| 太仆寺旗| 安国市|