怎么看百度蜘蛛有沒有來你的網(wǎng)站? seo新手對搜索引擎蜘蛛可能有所了解。百度蜘蛛實際上是一種搜索引擎的一種抓取程序。百度的蜘蛛如果經(jīng)常來你的網(wǎng)站,說明你的網(wǎng)站價值比較高。百度蜘蛛的經(jīng)常光臨還能提升你的收錄率。本文介紹下,怎么看百度蜘蛛有沒有來過你的網(wǎng)站?
要觀察百度蜘蛛的爬行記錄,最好的辦法是通過查看網(wǎng)站日志。
只要你的網(wǎng)頁被訪問過,不管是人還是百度蜘蛛、或者其他搜索引擎蜘蛛。網(wǎng)站日志中都可以把它記錄下來。正規(guī)的網(wǎng)站空間一般提供網(wǎng)站日志服務(wù)。網(wǎng)站日志的下載可以通過ftp。具體的目錄可以咨詢網(wǎng)站空間商。比較常見的目錄有:www_logs、logs等。
如果網(wǎng)站空間不提供網(wǎng)站日志服務(wù),你應(yīng)該考慮更換網(wǎng)站空間了。因為這是最基本的網(wǎng)站空間服務(wù)。如果連網(wǎng)站日志記錄功能都沒有,說明空間質(zhì)量肯定不會很高。
另外,如果你的網(wǎng)頁是php動態(tài)的。即網(wǎng)頁后綴為php。我們也可以安裝一組查看蜘蛛的代碼,來實時記錄百度蜘蛛的爬行記錄。
代碼如下:
<?php
function get_naps_bot()
{
$useragent = strtolower($_SERVER['HTTP_USER_AGENT']);
if (strpos($useragent, ‘googlebot’) !== false){
return ‘Googlebot’;
}
if (strpos($useragent, ‘msnbot’) !== false){
return ‘MSNbot’;
}
if (strpos($useragent, ‘slurp’) !== false){
return ‘Yahoobot’;
}
if (strpos($useragent, ‘baiduspider’) !== false){
return ‘Baiduspider’;
}
if (strpos($useragent, ‘sohu-search’) !== false){
return ‘Sohubot’;
}
if (strpos($useragent, ‘lycos’) !== false){
return ‘Lycos’;
}
if (strpos($useragent, ‘robozilla’) !== false){
return ‘Robozilla’;
}
return false;
}
function nowtime(){
$date=date(“Y-m-d.G:i:s”);
return $date;
}
$searchbot = get_naps_bot();
if ($searchbot) {
$tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);
$url=$_SERVER['HTTP_REFERER'];
$file=”log.txt”;
$time=nowtime();
$data=fopen($file,”a”);
$PR=”$_SERVER[REQUEST_URI]“;
fwrite($data,”Time:$time robot:$searchbot URL:$tlc_thispage\n page:$PR\r\n”);
fclose($data);
}
將上面的代碼保存成一個sp.php文件,將文件上傳到網(wǎng)站根目錄。然后使用一句php代碼調(diào)用它即可。
<?php include(“sp.php”);?>
當(dāng)然,如果您的空間不支持php的話,或者你的網(wǎng)頁為靜態(tài)頁面。則可以通過網(wǎng)站空間提供網(wǎng)站日志來查看百度蜘蛛的訪問情況。
?>