快捷導(dǎo)航

Python爬蟲(chóng)學(xué)習(xí)之獲取指定網(wǎng)頁(yè)源碼

更新時(shí)間：2019年07月30日 14:43:42 作者：羅思洋

這篇文章主要為大家詳細(xì)介紹了Python爬蟲(chóng)學(xué)習(xí)之獲取指定網(wǎng)頁(yè)源碼，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下

本文實(shí)例為大家分享了Python獲取指定網(wǎng)頁(yè)源碼的具體代碼，供大家參考，具體內(nèi)容如下

1、任務(wù)簡(jiǎn)介

前段時(shí)間一直在學(xué)習(xí)Python基礎(chǔ)知識(shí)，故未更新博客，近段時(shí)間學(xué)習(xí)了一些關(guān)于爬蟲(chóng)的知識(shí)，我會(huì)分為多篇博客對(duì)所學(xué)知識(shí)進(jìn)行更新，今天分享的是獲取指定網(wǎng)頁(yè)源碼的方法，只有將網(wǎng)頁(yè)源碼抓取下來(lái)才能從中提取我們需要的數(shù)據(jù)。

2、任務(wù)代碼

Python獲取指定網(wǎng)頁(yè)源碼的方法較為簡(jiǎn)單，我在Java中使用了38行代碼才獲取了網(wǎng)頁(yè)源碼（大概是學(xué)藝不精），而Python中只用了6行就達(dá)到了效果。

Python中獲取網(wǎng)頁(yè)源碼最簡(jiǎn)單的方法就是使用urllib包，具體代碼如下：

import urllib.request    #導(dǎo)入urllib.request庫(kù)
b = str(input("請(qǐng)輸入："))  #提示用戶(hù)輸入信息，并強(qiáng)制類(lèi)型轉(zhuǎn)換為字符串型
a = urllib.request.urlopen(b)#打開(kāi)指定網(wǎng)址
html = a.read()       #讀取網(wǎng)頁(yè)源碼
html = html.decode("utf-8") #解碼為unicode碼
print(html)         #打印網(wǎng)頁(yè)源碼

我輸入的網(wǎng)址是我博客主頁(yè)的網(wǎng)址https://blog.csdn.net/lsylsy726

運(yùn)行結(jié)果如下：

3、總結(jié)

這篇博客介紹的方法較為簡(jiǎn)單，其實(shí)有的網(wǎng)站會(huì)“反爬蟲(chóng)”，這時(shí)就需要我們使用User-Agent或者代理，這些東西都會(huì)在后面的博客中進(jìn)行更新，我預(yù)計(jì)在后面博客中更新“讀取CSDN博客訪問(wèn)量的小程序”和“有道翻譯小程序”及其他更難一些的知識(shí)，由于剛開(kāi)始學(xué)習(xí)爬蟲(chóng)，水平有限，請(qǐng)大家多多包涵。

以上就是本文的全部?jī)?nèi)容，希望對(duì)大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。

您可能感興趣的文章:

相關(guān)文章

Python 打印自己設(shè)計(jì)的字體的實(shí)例講解
在本篇內(nèi)容里小編給大家分享的是一篇關(guān)于Python 打印自己設(shè)計(jì)的字體的實(shí)例講解內(nèi)容，有需要的朋友們可以參考學(xué)習(xí)下。
2021-01-01
程序猿新手學(xué)習(xí)必備的Python工具整合
這篇文章主要介紹了程序猿新手必備的Python工具整合，Python 是一種開(kāi)源編程語(yǔ)言，用于 Web 編程、數(shù)據(jù)科學(xué)、人工智能和許多科學(xué)應(yīng)用
2021-09-09
Python代碼實(shí)現(xiàn)雙鏈表
這篇文章主要為大家詳細(xì)介紹了Python代碼實(shí)現(xiàn)雙鏈表，文中示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下
2022-05-05
基于Python實(shí)現(xiàn)銀行卡識(shí)別的示例代碼
銀行卡識(shí)別是一個(gè)在金融、安全等領(lǐng)域具有重要應(yīng)用的問(wèn)題,本文主要為大家介紹了如何使用Python和深度學(xué)習(xí)技術(shù)來(lái)實(shí)現(xiàn)銀行卡識(shí)別功能,需要的可以參考下
2024-03-03
Python中的Sequence類(lèi)型使用實(shí)例
這篇文章主要為大家介紹了Python中的Sequence類(lèi)型使用實(shí)例，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步，早日升職加薪
2023-12-12
Python 面向?qū)ο?成員的訪問(wèn)約束
在Java，C++，以及PHP中都有對(duì)應(yīng)的關(guān)鍵字，public，protected，private，但是在Python中卻沒(méi)有這些關(guān)鍵字來(lái)聲明類(lèi)成員的訪問(wèn)作用域。
2008-12-12
Python函數(shù)式編程
函數(shù)式編程Functional Programming，雖然也可以歸結(jié)到面向過(guò)程的程序設(shè)計(jì)，但其思想更接近數(shù)學(xué)計(jì)算。函數(shù)式編程就是一種抽象程度很高的編程范式，純粹的函數(shù)式編程語(yǔ)言編寫(xiě)的函數(shù)沒(méi)有變量。
2017-07-07
python訪問(wèn)sqlserver示例
這篇文章主要介紹了python訪問(wèn)sqlserver示例,需要的朋友可以參考下
2014-02-02
python matplotlib擬合直線的實(shí)現(xiàn)
這篇文章主要介紹了python matplotlib擬合直線的實(shí)現(xiàn),文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
2019-11-11
python有證書(shū)的加密解密實(shí)現(xiàn)方法
這篇文章主要介紹了python有證書(shū)的加密解密實(shí)現(xiàn)方法,采用了M2Crypto組件進(jìn)行相關(guān)的加密解密操作,包含了詳細(xì)的完整實(shí)現(xiàn)過(guò)程,需要的朋友可以參考下
2014-11-11