使用phpQuery采集網(wǎng)頁的方法
更新時(shí)間:2013年11月13日 10:36:44 作者:
使用phpQuery輕松采集網(wǎng)頁內(nèi)容,像使用jQuery一樣處理頁面內(nèi)容
phpQuery是一個(gè)基于PHP的服務(wù)端開源項(xiàng)目,它可以讓PHP開發(fā)人員輕松處理DOM文檔內(nèi)容,比如獲取某新聞網(wǎng)站的頭條信息。更有意思的是,它采用了jQuery的思想,你可以像使用jQuery一樣處理頁面內(nèi)容,獲取你想要的頁面信息。
采集頭條
先看一實(shí)例,現(xiàn)在我要采集新浪網(wǎng)國內(nèi)新聞的頭條,代碼如下:
include 'phpQuery/phpQuery.php';
phpQuery::newDocumentFile('http://m.fzitv.net');
echo pq(".blkTop h1:eq(0)")->html();
簡(jiǎn)單的三行代碼,就可以獲取頭條內(nèi)容。首先在程序中包含phpQuery.php核心程序,然后調(diào)用讀取目標(biāo)網(wǎng)頁,最后輸出對(duì)應(yīng)標(biāo)簽下的內(nèi)容。
pq()是一個(gè)功能強(qiáng)大的方法,跟jQuery的$()如出一轍,jQuery的選擇器基本上都能使用在phpQuery上,只要把“.”變成“->”。如上例中,pq(“.blkTop h1:eq(0)”)抓取了頁面class屬性為blkTop的DIV元素,并找到該DIV內(nèi)部的第一個(gè)h1標(biāo)簽,然后用html()方法獲取h1標(biāo)簽里的內(nèi)容(帶html標(biāo)簽),也就是我們要獲取的頭條信息,如果使用text()方法,則只獲取頭條的文本內(nèi)容。當(dāng)然要使用好phpQuery,關(guān)鍵是要找對(duì)文檔中對(duì)應(yīng)內(nèi)容的節(jié)點(diǎn)。
采集文章列表
下面再來看一個(gè)例子,獲取helloweba.com網(wǎng)站的blog列表,請(qǐng)看代碼:
include 'phpQuery/phpQuery.php';
phpQuery::newDocumentFile('http://m.fzitv.net');
$artlist = pq(".blog_li");
foreach($artlist as $li){
echo pq($li)->find('h2')->html()."";
}
通過循環(huán)列表中的DIV,找出文章標(biāo)題并輸出,就是這么簡(jiǎn)單。
解析XML文檔
假設(shè)現(xiàn)在有一個(gè)這樣的test.xml文檔:
<?xml version="1.0" encoding="utf-8"?>
<root>
<contact>
<name>張三</name>
<age>22</age>
</contact>
<contact>
<name>王五</name>
<age>18</age>
</contact>
</root>
現(xiàn)在我要獲取名字為張三的聯(lián)系人的年齡,代碼如下:
include 'phpQuery/phpQuery.php';
phpQuery::newDocumentFile('test.xml');
echo pq('contact > age:eq(0)');
結(jié)果輸出:22
像jQuery一樣,精準(zhǔn)查找文檔節(jié)點(diǎn),輸出節(jié)點(diǎn)下的內(nèi)容,解析一個(gè)XML文檔就是這么簡(jiǎn)單?,F(xiàn)在你不必為采集網(wǎng)站內(nèi)容而使用那些頭疼的正則算法、內(nèi)容替換等繁瑣的代碼了,有了phpQuery,一切就變得輕松多了。
phpquery項(xiàng)目官網(wǎng)地址:http://code.google.com/p/phpquery/
采集頭條
先看一實(shí)例,現(xiàn)在我要采集新浪網(wǎng)國內(nèi)新聞的頭條,代碼如下:
復(fù)制代碼 代碼如下:
include 'phpQuery/phpQuery.php';
phpQuery::newDocumentFile('http://m.fzitv.net');
echo pq(".blkTop h1:eq(0)")->html();
簡(jiǎn)單的三行代碼,就可以獲取頭條內(nèi)容。首先在程序中包含phpQuery.php核心程序,然后調(diào)用讀取目標(biāo)網(wǎng)頁,最后輸出對(duì)應(yīng)標(biāo)簽下的內(nèi)容。
pq()是一個(gè)功能強(qiáng)大的方法,跟jQuery的$()如出一轍,jQuery的選擇器基本上都能使用在phpQuery上,只要把“.”變成“->”。如上例中,pq(“.blkTop h1:eq(0)”)抓取了頁面class屬性為blkTop的DIV元素,并找到該DIV內(nèi)部的第一個(gè)h1標(biāo)簽,然后用html()方法獲取h1標(biāo)簽里的內(nèi)容(帶html標(biāo)簽),也就是我們要獲取的頭條信息,如果使用text()方法,則只獲取頭條的文本內(nèi)容。當(dāng)然要使用好phpQuery,關(guān)鍵是要找對(duì)文檔中對(duì)應(yīng)內(nèi)容的節(jié)點(diǎn)。
采集文章列表
下面再來看一個(gè)例子,獲取helloweba.com網(wǎng)站的blog列表,請(qǐng)看代碼:
復(fù)制代碼 代碼如下:
include 'phpQuery/phpQuery.php';
phpQuery::newDocumentFile('http://m.fzitv.net');
$artlist = pq(".blog_li");
foreach($artlist as $li){
echo pq($li)->find('h2')->html()."";
}
通過循環(huán)列表中的DIV,找出文章標(biāo)題并輸出,就是這么簡(jiǎn)單。
解析XML文檔
假設(shè)現(xiàn)在有一個(gè)這樣的test.xml文檔:
復(fù)制代碼 代碼如下:
<?xml version="1.0" encoding="utf-8"?>
<root>
<contact>
<name>張三</name>
<age>22</age>
</contact>
<contact>
<name>王五</name>
<age>18</age>
</contact>
</root>
現(xiàn)在我要獲取名字為張三的聯(lián)系人的年齡,代碼如下:
復(fù)制代碼 代碼如下:
include 'phpQuery/phpQuery.php';
phpQuery::newDocumentFile('test.xml');
echo pq('contact > age:eq(0)');
結(jié)果輸出:22
像jQuery一樣,精準(zhǔn)查找文檔節(jié)點(diǎn),輸出節(jié)點(diǎn)下的內(nèi)容,解析一個(gè)XML文檔就是這么簡(jiǎn)單?,F(xiàn)在你不必為采集網(wǎng)站內(nèi)容而使用那些頭疼的正則算法、內(nèi)容替換等繁瑣的代碼了,有了phpQuery,一切就變得輕松多了。
phpquery項(xiàng)目官網(wǎng)地址:http://code.google.com/p/phpquery/
相關(guān)文章
PHP基于反射機(jī)制實(shí)現(xiàn)插件的可插拔設(shè)計(jì)詳解
這篇文章主要介紹了PHP基于反射機(jī)制實(shí)現(xiàn)插件的可插拔設(shè)計(jì),結(jié)合實(shí)例形式較為詳細(xì)的分析了插件的功能、反射機(jī)制原理與實(shí)現(xiàn)可插拔設(shè)計(jì)的操作步驟,需要的朋友可以參考下2016-11-11
PHP+MySQL之Insert Into數(shù)據(jù)插入用法分析
這篇文章主要介紹了PHP+MySQL之Insert Into數(shù)據(jù)插入用法,實(shí)例分析了php+mysql基于Insert Into語句實(shí)現(xiàn)數(shù)據(jù)插入的相關(guān)技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下2015-09-09
PHP For循環(huán)字母A-Z當(dāng)超過26個(gè)字母時(shí)輸出AA,AB,AC
這篇文章主要介紹了PHP For循環(huán)字母A-Z當(dāng)超過26個(gè)字母時(shí)輸出AA,AB,AC,需要的朋友可以參考下2020-02-02
PhpMyAdmin出現(xiàn)export.php Missing parameter: what /export_type錯(cuò)
PhpMyAdmin出現(xiàn)export.php: Missing parameter: what /export_type錯(cuò)誤,有碰到同樣問題的朋友可參考一下2012-08-08
分享一個(gè)超好用的php header下載函數(shù)
這篇文章主要為大家分享一個(gè)超好用的php header下載函數(shù),需要的朋友可以參考下2014-01-01
PHP session有效期session.gc_maxlifetime
PHP中的session有效期默認(rèn)是1440秒(24分鐘)【weiweiok 注:php5里默認(rèn)的是180分】,也就是說,客戶端超過24分鐘沒有刷新,當(dāng)前session就會(huì)失效。很明顯,這是不能滿足需要的。2011-04-04

