php采集代码教程 php采集器

很多站长朋友们都不太清楚php采集代码教程，今天小编就来给大家整理php采集代码教程，希望对各位有所帮助，具体内容如下：

本文目录一览： 1、 php获取网页源码内容有哪些办法 2、怎么用php采集网站数据 3、 PHP采集代码实例 php获取网页源码内容有哪些办法

可以参考以下几种方法：

方法一： file_get_contents获取

$url="";

$fh= file_get_contents

(''); echo $fh;

方法二：使用fopen获取网页源代码

$url="";

$handle = fopen ($url, "rb");

$contents = "";

while (!feof($handle)) {

$contents .= fread($handle, 8192);

}

fclose($handle);

echo $contents; //输出获取到得内容。

方法三：使用CURL获取网页源代码

$url="";

$UserAgent = 'Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0; SLCC1; .NET CLR 2.0.50727; .NET CLR 3.0.04506; .NET CLR 3.5.21022; .NET CLR 1.0.3705; .NET CLR 1.1.4322)';

$curl = curl_init(); //创建一个新的CURL资源

curl_setopt($curl, CURLOPT_URL, $url); //设置URL和相应的选项

curl_setopt($curl, CURLOPT_HEADER, 0); //0表示不输出Header，1表示输出

curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1); //设定是否显示头信息,1显示，0不显示。//如果成功只将结果返回，不自动输出任何内容。如果失败返回FALSE

curl_setopt($curl, CURLOPT_SSL_VERIFYPEER, false);

curl_setopt($curl, CURLOPT_SSL_VERIFYHOST, false);

curl_setopt($curl, CURLOPT_ENCODING, ''); //设置编码格式，为空表示支持所有格式的编码

//header中“Accept-Encoding: ”部分的内容，支持的编码格式为："identity"，"deflate"，"gzip"。

curl_setopt($curl, CURLOPT_USERAGENT, $UserAgent);

curl_setopt($curl, CURLOPT_FOLLOWLOCATION, 1);

//设置这个选项为一个非零值(象 “Location: “)的头，服务器会把它当做HTTP头的一部分发送(注意这是递归的，PHP将发送形如 “Location: “的头)。

$data = curl_exec($curl);

echo $data;

//echo curl_errno($curl); //返回0时表示程序执行成功

curl_close($curl); //关闭cURL资源，并释放系统资源

拓展资料

PHP（外文名:PHP: Hypertext Preprocessor，中文名：“超文本预处理器”）是一种通用开源脚本语言。语法吸收了C语言、Java和Perl的特点，利于学习，使用广泛，主要适用于Web开发领域。PHP 独特的语法混合了C、Java、Perl以及PHP自创的语法。它可以比CGI或者Perl更快速地执行动态网页。

用PHP做出的动态页面与其他的编程语言相比，PHP是将程序嵌入到HTML（标准通用标记语言下的一个应用）文档中去执行，执行效率比完全生成HTML标记的CGI要高许多；PHP还可以执行编译后代码，编译可以达到加密和优化代码运行，使代码运行更快。

参考资料：PHP（超文本预处理器)-百度百科

怎么用php采集网站数据

简单的分了几个步骤：

1、确定采集目标

2、获取目标远程页面内容（curl、file_get_contents）

3、分析页面html源码，正则匹配你需要的内容（preg_match、preg_match_all），这一步最为重要，不同页面正则匹配规则不一样

4、入库

PHP采集代码实例

<?php

function

preg_substr($start,

$end,

$str)

正则截取函数

{

$temp

preg_split($start,

$str);

$content

preg_split($end,

$temp[1]);

return

$content[0];

}

function

str_substr($start,

$end,

$str)

字符串截取函数

{

$temp

explode($start,

$str,

2);

$content

explode($end,

$temp[1],

2);

return

$content[0];

}

----------------

使用实例

----------------

$str

iconv("UTF-8",

"GB2312",

file_get_contents(""));

echo

('标题:

str_substr("<title>",

"</title>",

$str));

通过字符串提取标题

echo

('作者:

preg_substr("/userid=d+">/",

"/<//",

$str));

通过正则提取作者

echo

('内容:

str_substr('<div

class="content">',

'</div>',

$str));

//内容当然不可以少

关于php采集代码教程的介绍到此就结束了，不知道本篇文章是否对您有帮助呢？如果你还想了解更多此类信息，记得收藏关注本站，我们会不定期更新哦。

查看更多关于php采集代码教程 php采集器的详细内容...

声明：本文来自网络，不代表【好得很程序员自学网】立场，转载请注明出处：http://haodehen.cn/did169318

更新时间：2023-04-14 阅读：41次