当前位置: 首页 > 图文教程 > 网络编程 > PHP > php 采集书并合成txt格式的实现代码

PHP
搜索引擎核心技术(PHP编程思路) --[1]
PHP巧获服务器端信息
用PHP实现标准的IP Whois查询
利用Yahoo! Search API开发自已的搜索引擎-php版
用php实现gb2312和unicode间的编码转换
用php发送带附件的Email
解决RHAS3中Apache2的PHP上传文件大小的限制
PHP和JAVA的XML-RPC中文问题解决办法
令你的网站获得任意Google PR值的方法
PHP应用分页显示制作详细讲解
使用php通过Socket进行发信源码,支持发信认证
Smarty实例教学 实例篇
用ActivePHP打造版本管理系统
Linux下安装GD
Apache2的httpd.conf翻译
PHP5的XML新特性
PHP5对象体系
Mysql 4.1 Windows 下升级问题
建立灵巧结构的PHP程序
PHP入门速成(3)

PHP 中的 php 采集书并合成txt格式的实现代码


出处:互联网   整理: 软晨网(RuanChen.com)   发布: 2009-09-13   浏览: 158 ::
收藏到网摘: n/a

记得上次有过一个叫采集后的处理这个就是它的升级版本 连采再处理,合成一本书txt的。 <?php
/**
* @name 采集书.php
* @date Sun Mar 01 22:48:02 CST 2009
* @copyright 马永占(MyZ)
* @author 马永占(MyZ)
* @link http://blog.csdn.net/mayongzhan/
*/
//header('Content-Type:text/html;charset=utf8');
header('Content-Type:text/html;charset=gb2312');
error_reporting(E_ALL);
date_default_timezone_set('Asia/Shanghai');
set_time_limit(0);
function writer($content,$url)
{
$fp = fopen($url, 'ab');
fwrite($fp, $content);
fclose($fp);
}
$folder = '2'; //文件夹
$book_base_url = 'xxxxxxxxxxxxxxxxxxxxx';
$book_url = 'yyyyyyyyyyyyy.html';
$main = file_get_contents($book_base_url.$book_url);
preg_match_all('/chapter_.*?\.html/', $main, $pages);
$pages = array_unique($pages[0]);
foreach ($pages as $value) {
writer(file_get_contents($book_base_url.$value), './'.$folder.'/'.$value.'.txt');
$str = file_get_contents('./'.$folder.'/'.$value.'.txt');
//print_r($str);
preg_match("/(<h1>)(.*?)(<\/h1>)(.*?)(<div id=\"contTxt\" class=\"contTxt1\">)(.*?)(<\/div>)/s",$str,$arr);
//print_r($arr);die();
$arr[6] = preg_replace("/(<span[^>]+>.*?<a[^>]+>)(.*?)(<\/a><\/span>)/s","$2",preg_replace("/<p>|<\/p>/","\r\n",$arr[6]));
$result = "\r\n------------------------------------------------\r\n------------------------------------------------\r\n------------------------------------------------\r\n----------------".$arr[2]."\r\n------------------------------------------------\r\n------------------------------------------------\r\n------------------------------------------------\r\n".$arr[6];
writer($result, './'.$folder.'/new.txt');
}
?>