时间:2014-10-17 09:48:12 来源: 复制分享
怎么看百度蜘蛛有没有来你的网站? seo新手对搜索引擎蜘蛛可能有所了解。百度蜘蛛实际上是一种搜索引擎的一种抓取程序。百度的蜘蛛如果经常来你的网站,说明你的网站价值比较高。百度蜘蛛的经常光临还能提升你的收录率。本文介绍下,怎么看百度蜘蛛有没有来过你的网站?
要观察百度蜘蛛的爬行记录,最好的办法是通过查看网站日志。
只要你的网页被访问过,不管是人还是百度蜘蛛、或者其他搜索引擎蜘蛛。网站日志中都可以把它记录下来。正规的网站空间一般提供网站日志服务。网站日志的下载可以通过ftp。具体的目录可以咨询网站空间商。比较常见的目录有:www_logs、logs等。
如果网站空间不提供网站日志服务,你应该考虑更换网站空间了。因为这是最基本的网站空间服务。如果连网站日志记录功能都没有,说明空间质量肯定不会很高。
另外,如果你的网页是php动态的。即网页后缀为php。我们也可以安装一组查看蜘蛛的代码,来实时记录百度蜘蛛的爬行记录。
代码如下:
<?php
function get_naps_bot()
{
$useragent = strtolower($_SERVER['HTTP_USER_AGENT']);
if (strpos($useragent, ‘googlebot’) !== false){
return ‘Googlebot’;
}
if (strpos($useragent, ‘msnbot’) !== false){
return ‘MSNbot’;
}
if (strpos($useragent, ‘slurp’) !== false){
return ‘Yahoobot’;
}
if (strpos($useragent, ‘baiduspider’) !== false){
return ‘Baiduspider’;
}
if (strpos($useragent, ‘sohu-search’) !== false){
return ‘Sohubot’;
}
if (strpos($useragent, ‘lycos’) !== false){
return ‘Lycos’;
}
if (strpos($useragent, ‘robozilla’) !== false){
return ‘Robozilla’;
}
return false;
}
function nowtime(){
$date=date(“Y-m-d.G:i:s”);
return $date;
}
$searchbot = get_naps_bot();
if ($searchbot) {
$tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);
$url=$_SERVER['HTTP_REFERER'];
$file=”log.txt”;
$time=nowtime();
$data=fopen($file,”a”);
$PR=”$_SERVER[REQUEST_URI]“;
fwrite($data,”Time:$time robot:$searchbot URL:$tlc_thispage\n page:$PR\r\n”);
fclose($data);
}
将上面的代码保存成一个sp.php文件,将文件上传到网站根目录。然后使用一句php代码调用它即可。
<?php include(“sp.php”);?>
当然,如果您的空间不支持php的话,或者你的网页为静态页面。则可以通过网站空间提供网站日志来查看百度蜘蛛的访问情况。
?>