PHP获取指定URL页面中的所有链接

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了PHP获取指定URL页面中的所有链接，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含2052字，纯文字阅读大概需要3分钟。

内容图文

这个东西其实我们开发人员来讲常用了，以前做一个抓取其它网站友情连接时用过，今天看到一朋友整理了一个PHP获取指定URL页面中的所有链接函数，整理过来我们一起来看看吧。

以下代码可以获取到指定URL页面中的所有链接，即所有a标签的href属性：

1. // 获取链接的HTML代码
2. $html = file_get_contents('http://www.111cn.net');
3. $dom = new DOMDocument();
4. @$dom->loadHTML($html);
5. $xpath = new DOMXPath($dom);
6. $hrefs = $xpath->evaluate('/html/body//a');
7. for ($i = 0; $i < $hrefs->length; $i++) {
8. $href = $hrefs->item($i);
9. $url = $href->getAttribute('href');
10. echo $url.'
    ';
11. }

这段代码会获取到所有a标签的href属性，但是href属性值不一定是链接，我们可以在做个过滤，只保留http开头的链接地址：

1. // 获取链接的HTML代码
2. $html = file_get_contents('http://www.111cn.net');
3. $dom = new DOMDocument();
4. @$dom->loadHTML($html);
5. $xpath = new DOMXPath($dom);
6. $hrefs = $xpath->evaluate('/html/body//a');
7. for ($i = 0; $i < $hrefs->length; $i++) {
8. $href = $hrefs->item($i);
9. $url = $href->getAttribute('href');
11. // 保留以http开头的链接
12. if(substr($url, 0, 4) == 'http')
13. echo $url.'
    ';
14. }

fopen()函数读取指定网页中的所有链接并统计出数量，在一些需要采集网页页容的地方，适合使用本代码，本例以读取百度首页为例，找出百度首页中所有的链接地址，代码经过测试，完全可用：

2. if(empty($url))$url = "http://www.baidu.com/";//需要采集链接的URL地址
3. $site=substr($url,0,strpos($url,"/",8));
4. $base=substr($url,0,strrpos($url,"/")+1);//文件所在目录
5. $fp = fopen($url, "r" );//打开url地址页面
6. while(!feof($fp))$contents.=fread($fp,1024);
7. $pattern="|href=['\"]?([^ '\"]+)['\" ]|U";
8. preg_match_all($pattern,$contents, $regArr, PREG_SET_ORDER);//使用正则匹配所有href=
9. for($i=0;$i
10. if(!eregi("://",$regArr[$i][1]))//判断是否是相对路径，即是否还有://
11. if(substr($regArr[$i][1],0,1)=="/")//是否是站点的根目录
12. echo "link".($i+1).":".$site.$regArr[$i][1]."
    ";//根目录
13. else
14. echo "link".($i+1).":".$base.$regArr[$i][1]."
    ";//当前目录
15. else
16. echo "link".($i+1).":".$regArr[$i][1]."
    ";//相对路径
17. }
18. fclose($fp);
19. ?>

form:http://www.uphtm.com/php/253.html

以上就介绍了PHP获取指定URL页面中的所有链接，包括了方面的内容，希望对PHP教程有兴趣的朋友有所帮助。

内容总结

以上是互联网集市为您收集整理的PHP获取指定URL页面中的所有链接全部内容，希望文章能够帮你解决PHP获取指定URL页面中的所有链接所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端