当前位置: 首页 > 图文教程 > 网络编程 > PHP > php IIS日志分析搜索引擎爬虫记录程序

PHP
用PHP实现ODBC数据分页显示一例
用DBSQL类加快开发MySQL数据库程序的速度
多php服务器实现多session并发运行
多核编程中的负载平衡难题
将Oracle内置的安全特性用于php
在PHP中使用ASP.NET AJAX
php中计算时间差的几种方法
PHP 5.0对象模型深度探索之类的静态成员
让PHP管理小型的邮件列表
MagickWand for PHP linux INSTALL 安装
PHP中数组元素升序、降序及重新排序的函数
PHP后门的隐藏技巧测试报告
配置Apache 1.3或者Apache 2.0服务器的5个技巧
用Suhosin加强PHP脚本语言安全性
PHP动态网页编程常用技巧四则
解答:如何使用PHP开发高效的WEB系统
PHP实现上传文件生成小图加文字的实例
PHP实现定时生成HTML网站首页
教你用PHP写MySQL数据库的用户认证系统
加速动态网站 MySQL索引分析和优化

PHP 中的 php IIS日志分析搜索引擎爬虫记录程序


出处:互联网   整理: 软晨网(RuanChen.com)   发布: 2009-09-13   浏览: 121 ::
收藏到网摘: n/a

由于最近比较忙,代码写得不怎么规范,界面也没有怎么美化,大家先用着吧,以后增加新功能会第一时间发布给大家! 使用注意:
  修改iis.php文件中iis日志的绝对路径
  例如:$folder=”c:/windows/system32/logfiles/站点日志目录/”; //后面记得一定要带斜杠(/)。
  ( 用虚拟空间的不懂查看你的站点绝对路径?上传个探针查看!
  直接查看法:http://站点域名/iis.php
  本地查看法:把日志下载到本地 http://127.0.0.1/iis.php )
  注意:
  //站点日志目录,注意该目录必须要有站点用户读取权限!
  //如果把日志下载到本地请修改143行的网址为您网站的网址,此操作不是必要操作,不影响分析结果。
  //修改文件名称iis.php 需要同时修改对应代码 ctrl+h 把 iis.php全部替换成您要修改的文件名 否则程序运行出错。
  //如果iis日志文件过大,可能会导致程序超时!同时也不建议大家使用!
以下是PHP源代码:
[code]
<?php
/*
牛仔IIS日志蜘蛛爬行记录分析器 V1.1(PHP GB2312 版)
作者:牛仔
QQ:172379201
Email:[email protected]
*/
//===================================================
header("content-type:text/html; charset=gb2312");
//站点日志目录,注意该目录必须要有站点用户读取权限!
$folder="C:/WINDOWS/system32/LogFiles/W3SVC1155699908/";//后面记得一定要带斜杠!
$pagesize = 25;//设置分页显示条数!
//=========================
$type = addslashes($_GET['type']);
if ($type)$type = base64_decode($type);
$showfile = addslashes($_GET['showfile']);
$page = addslashes($_GET['page']);
if (!$page)$page=1;
//============================
//打开目录
if (!$type){
if (file_exists($folder))
{
$fp=opendir($folder);
while(false!=$file=readdir($fp))
{
if($file!='.' &&$file!='..')
{
$file="$file";
$arr_file[]=$file;
}
}
if(is_array($arr_file))
{
for ($i=count($arr_file)-1;$i>=0;$i--)
{
$indexstr.="<tr><td height=\"25\" width=\"25%\">".date("Y-m-d",filectime($folder.$arr_file[$i]))."</td>
<td height=\"25\" width=\"25%\" align=\"center\"><a href=\"iisfile.php?type=".base64_encode(Baiduspider)."&showfile=".$arr_file[$i]."\">百度(Baidu)</a></td>
<td height=\"25\" width=\"25%\" align=\"center\"><a href=\"iisfile.php?type=".base64_encode(Googlebot)."&showfile=".$arr_file[$i]."\">谷歌(Google)</a></td>
<td height=\"25\" width=\"25%\" align=\"center\"><a href=\"iisfile.php?type=".base64_encode(yahoo)."&showfile=".$arr_file[$i]."\">雅虎(yahoo)</a></td></tr>";
}
}
closedir($fp);
$html = indexhtml();
$copy = mycopy();
$html = str_replace("[showlog]",$indexstr,$html);
$html = str_replace("[copy]",$copy,$html);
echo $html;
}else{
echo "该日志目录不存在或权限不足,请检查设置!";
exit();
}
}elseif ($type=='Baiduspider'){
echo show($type,$folder,$showfile,$page,$pagesize);
}elseif ($type=='Googlebot'){
echo show($type,$folder,$showfile,$page,$pagesize);
}elseif ($type=='yahoo'){
echo show($type,$folder,$showfile,$page,$pagesize);
}
function show($type,$folder,$showfile,$page,$pagesize)
{
if ($type=='Baiduspider')
{
$title='百度';
}elseif ($type=='Googlebot'){
$title='谷歌';
}elseif ($type=='yahoo'){
$title='雅虎';
}
if ($type&&$folder&&$showfile)
{
if(file_exists($folder.$showfile))
{
$fp= fopen($folder.$showfile,"r");
}else{
echo "该日志文件不存在,请检查设置!";
exit;
}
$j=0;
$y=0;
$t=0;
$h=0;
while (!feof($fp))
{
$str = fgets($fp);
$str =iconv("UTF-8","GB2312//IGNORE",$str);
if(strpos($str,$type))
{
$j++;
$temp[].=$str;
$tmpcount = explode(" ",$str);
if ($tmpcount[11]==200)$t++;
if ($tmpcount[11]==304)$h++;
if ($tmpcount[11]==404)$y++;
}
}
fclose($fp);
$count = count($temp);
if ($page==1)
{
$countshow=$count;
$mynum = $count-$pagesize;
}else{
$countshow =$count-($page*$pagesize-$pagesize);
$mynum = $count-$page*$pagesize;
}
$pagecount =ceil(count($temp) / $pagesize);
if ($page>=$pagecount)
{
$mynum = $pagecount;
}
$m=0;
for ($i=$countshow-1;$i>=$mynum;$i--)
{
$num = explode(" ",$temp[$i]);
$show.="
<tr>
<td heigth\"20\">".$num[0]." ".$num[1]."</td>
<td>".$num[9]."</td>
<td><a href=\"".rawurlencode($num[5])."\" target=\"_blank\">".$num[5]."</a></td>
<td>".$num[11]."</td>
</tr>";
}
unset($temp);
$showpage = "<td colspan=\"4\" height=\"30\" align=\"center\">每页 ".$pagesize." 条 当前".$page."/$pagecount";
$showpage.=" <a href=\"?type=".base64_encode($type)."&showfile=".$showfile."\">首页</a>";
if ($page!=1)
{
$showpage.=" <a href=\"?type=".base64_encode($type)."&showfile=".$showfile."&page=".($page-1)."\">上一页</a>";
}
if ($page!=$pagecount)
{
$showpage.=" <a href=\"?type=".base64_encode($type)."&showfile=".$showfile."&page=".($page+1)."\">下一页</a>";
$weei = " <a href=\"?type=".base64_encode($type)."&showfile=".$showfile."&page=".($pagecount)."\">尾页</a>";
}
$showpage.=$weei."</td>";
if ($show)
{
$html = pagehtml();
$copy = mycopy();
$htmltitle = "牛仔IIS日志蜘蛛爬行记录分析器-";//请保留,谢谢!
$html = str_replace("[title]",$title,$html);
$html = str_replace("[htmltitle]",$htmltitle,$html);
$html = str_replace("[show]",$show,$html);
$html = str_replace("[count]",$j,$html);
$html = str_replace(" 由于最近比较忙,代码写得不怎么规范,界面也没有怎么美化,大家先用着吧,以后增加新功能会第一时间发布给大家! ",$showpage,$html);
$html = str_replace("[y]",$y,$html);
$html = str_replace("[t]",$t,$html);
$html = str_replace("[h]",$h,$html);
$html = str_replace("[copy]",$copy,$html);
return $html;
}
}
}
[/code]
打包下载 http://www.ruanchen.com/"con_ad1">

    </tr>
</table>
[copy]
</body>
</html>';
}
function mycopy()
{
    return '<table border="1" width="100%" id="table2" cellspacing="0" cellpadding="0" style="border-collapse: collapse" height="402">
    <tr>
        <td height="35" bgcolor="#C0C0C0" align="center"><b>分析说明</b></td>
    </tr>
    <tr>
        <td height="170"> <p> 死链:表示蜘蛛访问的面页不存在或链接错误,爬行状态返回404。</p>
        <p> 缓存:表示蜘蛛之前已经爬过的面页且该面页未更新过,蜘蛛缓存区已存在该文件,不再下载该面页内容。爬行状态返回304。</p>
        <p> 正常:表示该面页蜘蛛访问正常,并已经下载。爬行状态返回200。</p>
        <p> 注意:蜘蛛爬过的面页不一定会放出来,因为蜘蛛爬回去的数据须经过引擎规则筛选后才会放出来,至于详细请查看引擎收录帮助。</p>
        <p> </td>
    </tr>
    <tr>
        <td> 程序名称:<a target="_blank" href="http://www.niuzi.com/">牛仔IIS日志蜘蛛爬行记录分析器 V1.1</a><p> 作者:牛仔</p>
        <p> QQ:172379201</p>
        <p> Email:17gd$163.com ($转换@)</p>
        <p> 注意:本程序只供大家学习使用,请勿用作商业用途。</td>
    </tr>
</table>';
}
?>
[/code]

评论 (0) All

登陆 还没注册?