snoopy是一个php类,用来模仿web浏览器的功能

snoopy是一个php类,用来模仿web浏览器的功能,它能完成获取网页内容和发送表单的任务。
    下面是它的一些特征:
1、方便抓取网页的内容
2、方便抓取网页的文字(去掉HTML代码)
3、方便抓取网页的链接
4、支持代理主机
5、支持基本的用户/密码认证模式
6、支持自定义用户agent,referer,cookies和header内容
7、支持浏览器转向,并能控制转向深度
8、能把网页中的链接扩展成高质量的url(默认)
9、方便提交数据并且获取返回值
10、支持跟踪HTML框架(v0.92增加)
11、支持再转向的时候传递cookies


下面是简单的例子,比如说我们抓取我的blog的文字

<?
include "Snoopy.class.php";
$snoopy = new Snoopy;
$snoopy->fetchtext("http://www.phpobject.net/blog");
echo $snoopy->results;
?>


^_^,不错把,在比如抓取链接

<?
include "Snoopy.class.php";
$snoopy = new Snoopy;
$snoopy->fetchlinks("http://www.phpobject.net/blog");
print_r($snoopy->results);
?>


嘿嘿,效果不错把,而且全部都是我们需要的url,而没有那种/blog/read.php/85.htm那种东西。

作者: 逆雪寒   发布时间: 2007-12-17

curl库已经集成到PHP5里面了啊,貌似curl更快更强大啊

作者: carche   发布时间: 2007-12-17

他里面包了 curl 的

作者: Phzzy   发布时间: 2007-12-17

楼上骗人啊,snoopy是用fsockopen来实现的

作者: carche   发布时间: 2007-12-17

 别吵。自己写不就完了吗。管他什么实现的呢

作者: 逆雪寒   发布时间: 2007-12-17

引用:
原帖由 carche 于 2007-12-17 14:54 发表
楼上骗人啊,snoopy是用fsockopen来实现的
你看看https部分

作者: Phzzy   发布时间: 2007-12-17

嗯。楼上是对的。仔细把代码过了一遍,https部分是cURL实现的。windows下用不了那个cURL。

作者: carche   发布时间: 2007-12-18