脚本宝典收集整理的这篇文章主要介绍了PHP记录搜索引擎蜘蛛访问网站足迹的方法,脚本宝典觉得挺不错的,现在分享给大家,也给大家做个参考。
本文实例讲述了PHP记录搜索引擎蜘蛛访问网站足迹的方法。分享给大家供大家参考。具体分析如下:
搜索引擎的蜘蛛访问网站是通过远程抓取页面来进行的,我们不能使用JS代码来取得蜘蛛的Agent信息,但是我们可以通过image标签,这样我们就可以得到蜘蛛的agent资料了,通过对agent资料的分析,就可以确定蜘蛛的种类、性别等因素,我们在通过数据库或者文本来记录就可以进行统计了。
数据库结构:
以下为引用的内容:
<PRe class="brush:sql;"> # # 表的结构 `naps_stats_bot` #CREATE TABLE naps_stats_bot
(
botid
int(10) unsigned NOT NULL auto_increment,botname
varchar(100) NOT NULL default '',botagent
varchar(200) NOT NULL default '',bottag
varchar(100) NOT NULL default '',botcount
int(11) NOT NULL default '0',botlast
datetime NOT NULL default '0000-00-00 00:00:00',botlasturl
varchar(250) NOT NULL default '',UNIQUE KEY botid
(botid
),KEY botname
(botname
)
) TYPE=MyISAM AUTO_INCREMENT=9 ;
naps_stats_bot
INSERT INTO naps_stats_bot
VALUES (1,'Googlebot','Googlebot/2.X (+http://www.googlebot.com/bot.html)','googlebot','0000-00-00 00:00:00','');
INSERT INTO naps_stats_bot
VALUES (2,'msnbot','MSNBOT/0.1 (http://search.msn.com/msnbot.htm)','msnbot','');
INSERT INTO naps_stats_bot
VALUES (3,'Inktomi Slurp','Slurp/2.0','slurp','');
INSERT INTO naps_stats_bot
VALUES (4,'BaiduSpider','Baiduspider+(+http://www.baidu.com/search/spider.htm)','baiduspider','');
INSERT INTO naps_stats_bot
VALUES (5,'Yahoobot','Mozilla/5.0+(compatible;+Yahoo!+Slurp;+http://help.yahoo.com/help/us/ysearch/slurp)','');
INSERT INTO naps_stats_bot
VALUES (6,'Sohubot','sohu-seArch','');
INSERT INTO naps_stats_bot
VALUES (7,'Lycos','Lycos/x.x','lycos','');
INSERT INTO naps_stats_bot
VALUES (8,'Robozilla','Robozilla/1.0','robozilla','');
以上是脚本宝典为你收集整理的PHP记录搜索引擎蜘蛛访问网站足迹的方法全部内容,希望文章能够帮你解决PHP记录搜索引擎蜘蛛访问网站足迹的方法所遇到的问题。
本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。