快捷導(dǎo)航

零基礎(chǔ)寫python爬蟲之抓取百度貼吧代碼分享

更新時(shí)間：2014年11月06日 08:52:17 投稿：hebedich

前面幾篇都是以介紹基礎(chǔ)知識(shí)為主，各位童鞋估計(jì)都在犯嘀咕了，你到底寫不寫爬蟲?。浚款~，好吧，本文就給大家寫一個(gè)簡(jiǎn)單的百度貼吧的python爬蟲代碼。

這里就不給大家廢話了，直接上代碼，代碼的解釋都在注釋里面，看不懂的也別來(lái)問(wèn)我，好好學(xué)學(xué)基礎(chǔ)知識(shí)去！

# -*- coding: utf-8 -*-
#---------------------------------------
#   程序：百度貼吧爬蟲
#   版本：0.1
#   作者：why
#   日期：2013-05-14
#   語(yǔ)言：Python 2.7
#   操作：輸入帶分頁(yè)的地址，去掉最后面的數(shù)字，設(shè)置一下起始頁(yè)數(shù)和終點(diǎn)頁(yè)數(shù)。
#   功能：下載對(duì)應(yīng)頁(yè)碼內(nèi)的所有頁(yè)面并存儲(chǔ)為html文件。
#---------------------------------------
import string, urllib2
#定義百度函數(shù)
def baidu_tieba(url,begin_page,end_page):
    for i in range(begin_page, end_page+1):
        sName = string.zfill(i,5) + '.html'#自動(dòng)填充成六位的文件名
        print '正在下載第' + str(i) + '個(gè)網(wǎng)頁(yè)，并將其存儲(chǔ)為' + sName + '......'
        f = open(sName,'w+')
        m = urllib2.urlopen(url + str(i)).read()
        f.write(m)
        f.close()
#-------- 在這里輸入?yún)?shù) ------------------
# 這個(gè)是山東大學(xué)的百度貼吧中某一個(gè)帖子的地址
#bdurl = 'http://tieba.baidu.com/p/2296017831?pn='
#iPostBegin = 1
#iPostEnd = 10

bdurl = str(raw_input(u'請(qǐng)輸入貼吧的地址，去掉pn=后面的數(shù)字：\n'))
begin_page = int(raw_input(u'請(qǐng)輸入開(kāi)始的頁(yè)數(shù)：\n'))
end_page = int(raw_input(u'請(qǐng)輸入終點(diǎn)的頁(yè)數(shù)：\n'))
#-------- 在這里輸入?yún)?shù) ------------------
#調(diào)用
baidu_tieba(bdurl,begin_page,end_page)

以上就是python抓取百度貼吧的一段簡(jiǎn)單的代碼，非常的實(shí)用吧，各位可以自行擴(kuò)展下。

您可能感興趣的文章:

相關(guān)文章

Python+Pygame實(shí)現(xiàn)簡(jiǎn)單的單詞小游戲
語(yǔ)言是一種藝術(shù)，但是作為語(yǔ)言的基礎(chǔ)——詞匯，卻不像藝術(shù)那樣賞心悅目。不斷的記憶與復(fù)習(xí)，讓詞匯成為很多孩子在學(xué)習(xí)英語(yǔ)時(shí)，最難完全攻克的關(guān)卡。本文就來(lái)用Python制作一個(gè)簡(jiǎn)單的英語(yǔ)單詞游戲吧
2023-03-03
Python可視化神器pyecharts繪制柱狀圖
這篇文章主要介紹了Python可視化神器pyecharts繪制柱狀圖，文章圍繞主題展開(kāi)詳細(xì)的內(nèi)容介紹，具有一定的參考價(jià)值，需要的朋友可以參考一下
2022-07-07
各種Python庫(kù)安裝包下載地址與安裝過(guò)程詳細(xì)介紹(Windows版)
這篇文章主要介紹了Windows版的各種Python庫(kù)安裝包下載地址與安裝過(guò)程詳細(xì)介紹,本文給大家提供了windows版的各種Python庫(kù)安裝包下載地址等相關(guān)知識(shí)，非常不錯(cuò)具有參考借鑒價(jià)值，需要的朋友可以參考下
2016-11-11
Python中的深拷貝和淺拷貝詳解
這篇文章主要介紹了Python中的深拷貝和淺拷貝詳解,本文講解了變量-對(duì)象-引用、可變對(duì)象-不可變對(duì)象、拷貝等內(nèi)容,需要的朋友可以參考下
2015-06-06
Python中的chr()函數(shù)與ord()函數(shù)解析
這篇文章主要介紹了Python中的chr()函數(shù)與ord()函數(shù)解析，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教
2022-05-05
解決python的空格和tab混淆而報(bào)錯(cuò)的問(wèn)題
這篇文章主要介紹了解決python的空格和tab混淆而報(bào)錯(cuò)的問(wèn)題，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧
2021-02-02
Python使用pyperclip庫(kù)操作剪切板
本文將介紹如何使用pyperclip庫(kù)來(lái)進(jìn)行剪切板操作,包括復(fù)制、粘貼文本和圖片,以及清空剪切板內(nèi)容等功能,具有一定的參考價(jià)值,感興趣的可以了解一下
2024-03-03
OpenCV圖像分割之分水嶺算法與圖像金字塔算法詳解
本文主要介紹了OpenCV中的分水嶺算法、圖像金字塔對(duì)圖像進(jìn)行分割的方法。文中的示例代碼講解詳細(xì)，對(duì)我們學(xué)習(xí)OpenCV有一定的幫助，需要的可以參考一下
2021-12-12
python 變量初始化空列表的例子
今天小編就為大家分享一篇python 變量初始化空列表的例子，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧
2019-11-11
pytorch模型部署到onnx的詳細(xì)過(guò)程
這篇文章主要介紹了如何簡(jiǎn)單的將pytorch模型部署到onnx,本文結(jié)合示例代碼給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
2023-08-08