PHP记录搜索引擎蜘蛛访问网站足迹的方法

发布时间:2022-04-30 发布网站:脚本宝典
脚本宝典收集整理的这篇文章主要介绍了PHP记录搜索引擎蜘蛛访问网站足迹的方法脚本宝典觉得挺不错的,现在分享给大家,也给大家做个参考。

本文实例讲述了PHP记录搜索引擎蜘蛛访问网站足迹的方法分享给大家供大家参考。具体分析如下:

搜索引擎的蜘蛛访问网站是通过远程抓取页面来进行的,我们不能使用JS代码来取得蜘蛛的Agent信息,但是我们可以通过image标签,这样我们就可以得到蜘蛛的agent资料了,通过对agent资料的分析,就可以确定蜘蛛的种类、性别等因素,我们在通过数据库或者文本来记录就可以进行统计了。

数据库结构:

以下为引用的内容

<PRe class="brush:sql;"> # # 表的结构 `naps_stats_bot` #

CREATE TABLE naps_stats_bot (
botid int(10) unsigned NOT NULL auto_increment,botname varchar(100) NOT NULL default '',botagent varchar(200) NOT NULL default '',bottag varchar(100) NOT NULL default '',botcount int(11) NOT NULL default '0',botlast datetime NOT NULL default '0000-00-00 00:00:00',botlasturl varchar(250) NOT NULL default '',UNIQUE KEY botid (botid),KEY botname (botname)
) TYPE=MyISAM AUTO_INCREMENT=9 ;

导出表中的数据 naps_stats_bot

INSERT INTO naps_stats_bot VALUES (1,'Googlebot','Googlebot/2.X (+http://www.googlebot.com/bot.html)','googlebot','0000-00-00 00:00:00','');
INSERT INTO naps_stats_bot VALUES (2,'msnbot','MSNBOT/0.1 (http://search.msn.com/msnbot.htm)','msnbot','');
INSERT INTO naps_stats_bot VALUES (3,'Inktomi Slurp','Slurp/2.0','slurp','');
INSERT INTO naps_stats_bot VALUES (4,'BaiduSpider','Baiduspider+(+http://www.baidu.com/search/spider.htm)','baiduspider','');
INSERT INTO naps_stats_bot VALUES (5,'Yahoobot','Mozilla/5.0+(compatible;+Yahoo!+Slurp;+http://help.yahoo.com/help/us/ysearch/slurp)','');
INSERT INTO naps_stats_bot VALUES (6,'Sohubot','sohu-seArch','');
INSERT INTO naps_stats_bot VALUES (7,'Lycos','Lycos/x.x','lycos','');
INSERT INTO naps_stats_bot VALUES (8,'Robozilla','Robozilla/1.0','robozilla','');

脚本宝典总结

以上是脚本宝典为你收集整理的PHP记录搜索引擎蜘蛛访问网站足迹的方法全部内容,希望文章能够帮你解决PHP记录搜索引擎蜘蛛访问网站足迹的方法所遇到的问题。

如果觉得脚本宝典网站内容还不错,欢迎将脚本宝典推荐好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。