现在很多网友问我怎么看搜索引擎蜘蛛是否来过我的网站,我告诉他们要去看网站访问日志,但是很多朋友都是新手不知道怎么查看服务器访问日志的,而访问日志对于网站优化者来说里边包含了很多有价值的信息,怎么才能直观易懂的记录各大搜索引擎蜘蛛爬去记录呢?很多cms有专门的记录工具或者插件,但是织梦本身的功能中不包含这个功能,所以也就有牛人开发出了这样一个工具,可以用来详细的记录各大搜索引擎蜘蛛的访问记录,方便优化人员根据日志及时对网站做出调整,今天我就整理了下这个工具,希望有需要的朋友下载使用。
蜘蛛爬行痕迹记录工具介绍:
1.后台可以自由添加修改和删除各大搜索蜘蛛
2.查看蜘蛛爬行的详细信息(最后来访时间,ip地址,被访地址)
分析说明:蜘蛛名称:百度
最后来访时间:2012-12-08 15:49:33
IP地址:222.88.6.142
被访地址:地址省略(就是你网站中的页面URL,被蜘蛛访问的。)
表达的意思为:IP为222.88.6.142的百度蜘蛛在2010-01-16 15:49:33对的 网页地址省略/ 网页进行访问。
3.分别按(日、周、月、年)统计了各大搜索爬虫对网站的访问次数
4.详细记录蜘蛛访问的痕迹, 蜘蛛名称 最后来访时间 IP地址 被访地址
5.对每个蜘蛛的访问总数做了统计
6.采用缓存技术对添加的蜘蛛进行缓存,以达到更快的速度
安装注意事项:
如果本程序运行在非windows平台下,请将data文件夹权限设置为:777
安装完成后进入后台,请点击:生成缓存
请在安装完成后立即删除install文件夹
数据库采取UTF-8编码
建立MYSQL数据库时,请选择utf8_general_ci编码
程序安装路径:http://你的网站地址/install
后台访问路径:http://你的网站地址/AdminLogin.php
调用方法:
在footer放入以下代码更新生成所有页面即可:
<script language="JavaScript" src="http://你的网站地址/bot/bot.php"></script>