网页抓取：PHP实现网页爬虫方式小结，抓取爬虫_PHP教程

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了网页抓取：PHP实现网页爬虫方式小结，抓取爬虫_PHP教程，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含2570字，纯文字阅读大概需要4分钟。

内容图文

网页抓取：PHP实现网页爬虫方式小结，抓取爬虫

来源：http://www.ido321.com/1158.html

抓取某一个网页中的内容，需要对DOM树进行解析，找到指定节点后，再抓取我们需要的内容，过程有点繁琐。LZ总结了几种常用的、易于实现的网页抓取方式，如果熟悉JQuery选择器，这几种框架会相当简单。

一、Ganon

项目地址： http://code.google.com/p/ganon/

文档： http://code.google.com/p/ganon/w/list

测试:抓取我的网站首页所有class属性值是focus的div元素，并且输出class值

include 'ganon.php';
 $html = file_get_dom('http://www.ido321.com/');
 foreach($html('div[class="focus"]') as $element) {
   echo $element->class, "
\n"; 
 }
?>

结果:

二、phpQuery

项目地址：http://code.google.com/p/phpquery/

文档：https://code.google.com/p/phpquery/wiki/Manual

测试：抓取我网站首页的article标签元素，然后出书其下h2标签的html值

include 'phpQuery/phpQuery.php'; 
phpQuery::newDocumentFile('http://www.ido321.com/'); 
$artlist = pq("article"); 
foreach($artlist as $title){ 
   echo pq($title)->find('h2')->html()."
"; 
} 
?>

结果：

三、Simple-Html-Dom

项目地址： http://simplehtmldom.sourceforge.net/
文档： http://simplehtmldom.sourceforge.net/manual.htm

测试：抓取我网站首页的所有链接

include 'simple_html_dom.php';
//使用url和file都可以创建DOM
$html = file_get_html('http://www.ido321.com/');

//找到所有图片
// foreach($html->find('img') as $element)
//        echo $element->src . '
';

//找到所有链接
foreach($html->find('a') as $element)
       echo $element->href . '
'; 
?>

结果：（截图是一部分）

四、Snoopy

项目地址：http://code.google.com/p/phpquery/

文档：http://code.google.com/p/phpquery/wiki/Manual

测试：抓取我的网站首页

include("Snoopy.class.php");
$url = "http://www.ido321.com";
$snoopy = new Snoopy;
$snoopy->fetch($url); //获取所有内容
 echo $snoopy->results; //显示结果
// echo $snoopy->fetchtext ;//获取文本内容（去掉html代码）
// echo $snoopy->fetchlinks($url) ;//获取链接
// $snoopy->fetchform ;//获取表单 
?>

结果：

五、手动编写爬虫

如果编写能力ok，可以手写一个网页爬虫，实现网页抓取。网上有千篇一律的介绍此方法的文章，LZ就不赘述了。有兴趣了解的，可以百度 php 网页抓取。

ps：资源分享

常见的开源爬虫项目请戳：http://blog.chinaunix.net/uid-22414998-id-3774291.html

下一篇：国民岳父的“屁民理论”

php网络爬虫实现采集某个网站的部分内容

楼主，你可以使用simpl_html_dom 这个类来采集，具体怎么使用，如果你会jquery的话，相信你看一下就懂了。祝你好运。
 

爬虫抓取网页关键字、摘要以供搜索

strip_tags($string)
 

http://www.bkjia.com/PHPjc/907659.htmlwww.bkjia.comtruehttp://www.bkjia.com/PHPjc/907659.htmlTechArticle网页抓取：PHP实现网页爬虫方式小结，抓取爬虫 来源：http://www.ido321.com/1158.html 抓取某一个网页中的内容，需要对DOM树进行解析，找到指定...

内容总结

以上是互联网集市为您收集整理的网页抓取：PHP实现网页爬虫方式小结，抓取爬虫_PHP教程全部内容，希望文章能够帮你解决网页抓取：PHP实现网页爬虫方式小结，抓取爬虫_PHP教程所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---