蜘蛛来访爬取链接详情导出TXT文件(php脚本)
偶然间看到群友发的,试了下还挺好用。该PHP脚本可以实现判断蜘蛛来访访问的链接等和显示蜘蛛IP等等挺好玩的。
不喜勿喷。
PHP脚本代码如下:
<?php
$useragent = addslashes(strtolower($_SERVER['HTTP_USER_AGENT']));
if (strpos($useragent, 'msn')!== false){$bot = 'msn';}
elseif (strpos($useragent,'baiduspider') !== false){$bot = 'Baidu';}
elseif (strpos($useragent,'sogou spider') !== false){$bot = 'Sogou';}
elseif (strpos($useragent,'sogou web') !== false){$bot = 'Sogou web';}
elseif (strpos($agent,'Bytespider') !== false){$bot = 'Bytespider';}
elseif (strpos($useragent,'YisouSpider') !== false){$bot = 'YisouSpider';}
elseif (strpos($useragent,'360Spider') !== false){$bot = '360Spider';}
elseif (strpos($useragent,'bot') !== false){$bot = '其它蜘蛛';}
if(isset($bot)){
$fp = @fopen( $_SERVER['DOCUMENT_ROOT']."/bot.txt",'a');
fwrite($fp,date('Y-m-d H:i:s')."\t".$_SERVER["REMOTE_ADDR"]."\t".$bot."\t".'http://'.$_SERVER['SERVER_NAME'].$_SERVER["REQUEST_URI"]."\r\n");
fclose($fp);
}
?>
博主以苹果CMS V10版本来说明使用教程,复制上面展示的PHP脚本代码放到苹果CMS根目录的 index.php 文件最顶部处即可(其他程序自测)
如图

QQ图片20200903004000.png

找到根目录的这个文件打开复制上面的脚本

QQ图片20200903003307.png

放完后首先他会自动生成一个 bot.txt 文件。其他就不用管理,当有人或者有蜘蛛来访的时候该脚本会自动输出日志写入到 bot.txt 文件里。如下图演示

QQ图片20200903003814.png

 

本文标题:蜘蛛来访爬取链接详情导出TXT文件(php脚本)
本文链接:https://www.lengxi.net/post/369.html
作者授权:除特别说明外,本文由 冷曦 原创编译并授权 冷曦博客 - 源码之家 刊载发布。
版权声明:本文不使用任何协议授权,您可以任何形式自由转载或使用。

暂无留言,赶快评论吧

欢迎留言