php記錄搜索引擎爬行記錄的實現(xiàn)代碼
更新時間：2018年03月02日 16:36:10 投稿：mrr
這篇文章主要介紹了php記錄搜索引擎爬行記錄的實現(xiàn)代碼，然后在文中給大家補充介紹了php獲取各搜索蜘蛛爬行記錄的代碼,需要的朋友可以參考下
下面是完整代碼：
//記錄搜索引擎爬行記錄 $searchbot = get_naps_bot();
if ($searchbot)
{ $tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);
$url = $_SERVER['HTTP_REFERER'];
$file = WEB_PATH.'robotslogs.txt';
$date = date('Y-m-d H:i:s');
$data = fopen($file,'a');
fwrite($data,"Time:$date robot:$searchbot URL:$tlc_thispage/r/n");
fclose($data);
}
WEB_PATH為index.PHP下define的根目錄路徑，意思就是說robotslogs.txt文件是放在根目錄下的。
通過get_naps_bot()獲取蜘蛛爬行記錄，然后在通過addslashes處理一下，將數(shù)據(jù)存儲于變量$tlc_thispage中。
fopen打開robotslogs.txt文件，將數(shù)據(jù)通過函數(shù)fwrite寫入，在通過函數(shù)fclose關(guān)閉就可以了。
因為我覺得沒必要，所以把自己網(wǎng)站上的代碼刪除了，所以也沒有效果示例了。
PS：php獲取各搜索蜘蛛爬行記錄的代碼
支持如下的搜索引擎：Baidu,Google,Bing,Yahoo,Soso,Sogou,Yodao爬行網(wǎng)站的記錄!
代碼：
<?php
/**
* 獲取搜索引擎爬行記錄
* edit by m.fzitv.net
*/
function get_naps_bot()
{
$useragent = strtolower($_SERVER['HTTP_USER_AGENT']);
if (strpos($useragent, 'googlebot') !== false){
return 'Google';
}
if (strpos($useragent, 'baiduspider') !== false){
return 'Baidu';
}
if (strpos($useragent, 'msnbot') !== false){
return 'Bing';
}
if (strpos($useragent, 'slurp') !== false){
return 'Yahoo';
}
if (strpos($useragent, 'sosospider') !== false){
return 'Soso';
}
if (strpos($useragent, 'sogou spider') !== false){
return 'Sogou';
}
if (strpos($useragent, 'yodaobot') !== false){
return 'Yodao';
}
return false;
}
function nowtime(){
$date=date("Y-m-d.G:i:s");
return $date;
}
$searchbot = get_naps_bot();
if ($searchbot) {
$tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);
$url=$_SERVER['HTTP_REFERER'];
$file="m.fzitv.net.txt";
$time=nowtime();
$data=fopen($file,"a");
fwrite($data,"Time:$time robot:$searchbot URL:$tlc_thispage\n");
fclose($data);
}
?>
總結(jié)
以上所述是小編給大家介紹的php記錄搜索引擎爬行記錄，希望對大家有所幫助，如果大家有任何疑問請給我留言，小編會及時回復大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持！
相關(guān)文章
這篇文章主要介紹了typecho插件編寫教程（二）:寫一個新插件,本文是系列文章的第二篇,需要的朋友可以參考下2015-05-05
php類中接口的應(yīng)用關(guān)鍵字是interface、implements了，接口是一種成員屬性全部為抽象或常量的特殊抽象類,implements主要是對類名，類所擁有的方法，以及所傳參數(shù)起約束和規(guī)范做用，有點像 abstract 抽象類2017-06-06
yii2.0框架是PHP開發(fā)的一個比較高效率的框架，集合了作者的大量心血，下面這篇文章主要介紹了Yii2如何實現(xiàn)增刪改查后仍留在當前頁的方法,需要的朋友可以參考借鑒，下面來一起看看吧。2017-01-01
ThinkPHP使用Smarty第三方插件方法小結(jié)
這篇文章主要介紹了ThinkPHP使用Smarty第三方插件方法,結(jié)合實例形式總結(jié)分析了ThinkPHP使用Smarty模板的具體步驟與相關(guān)注意事項,需要的朋友可以參考下2016-03-03
這篇文章介紹了php用戶注冊頁面利用js進行表單驗證具體實例，有需要的朋友可以參考一下2013-10-10
CodeIgniter是一個輕量級但功能強大的PHP框架，基于MVC設(shè)計模式，提供了一套豐富的類庫，簡單易學，高效實用。下面給大家介紹CI框架無限級分類+遞歸的實現(xiàn)代碼，感興趣的朋友參考下吧2016-11-11
這篇文章主要介紹了phpmailer中文亂碼問題的解決方法,需要的朋友可以參考下2014-04-04
其實微信公眾平臺的多客服功能已經(jīng)出來好久了，并且一出來的時候我就已經(jīng)為自己的公眾號實現(xiàn)了，原本以為大家都已經(jīng)會了，但是今天還是有人問起這個多客服功能怎么使用，我找了下網(wǎng)上也沒什么好的教程，今天我就給大家發(fā)一篇比較簡單易懂的教程吧2016-01-01
PHP程序員簡單的開展服務(wù)治理架構(gòu)操作詳解(一)
這篇文章主要介紹了PHP程序員簡單的開展服務(wù)治理架構(gòu)操作,結(jié)合實例形式詳細分析了PHP開展服務(wù)治理架構(gòu)操作相關(guān)原理、RPC通信實現(xiàn)技巧與注意事項,需要的朋友可以參考下2020-05-05
THINKPHP3.2使用soap連接webservice的解決方法
這篇文章主要為大家詳細介紹了THINKPHP3.2使用soap連接webservice的解決方法，具有一定的參考價值，感興趣的小伙伴們可以參考一下2017-12-12