用Python抓取RSS feed

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了用Python抓取RSS feed，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1213字，纯文字阅读大概需要2分钟。

内容图文

我是Python和编程的新手,所以如果问题非常愚蠢,请原谅.

我一直在跟踪this关于RSS抓取的教程,但是当我试图收集相应链接到正在收集的文章的标题时,我得到了Python的“列表索引超出范围”错误.

这是我的代码：

from urllib import urlopen
from BeautifulSoup import BeautifulSoup
import re

source  = urlopen('http://feeds.huffingtonpost.com/huffingtonpost/raw_feed').read()

title = re.compile('<title>(.*)</title>')
link = re.compile('<link>(.*)</link>')

find_title = re.findall(title, source)
find_link = re.findall(link, source)

literate = []
literate[:] = range(1, 16)

for i in literate:
    print find_title[i]
    print find_link[i]

当我只告诉它检索标题时它执行正常,但是当我想检索标题及其相应的链接时立即抛出索引错误.

任何帮助将不胜感激.

解决方法:

我认为您使用错误的正则表达式从页面中提取链接.

>>> link = re.compile('<link rel="alternate" type="text/html" href=(.*)')
>>> find_link = re.findall(link, source)
>>> find_link[1].strip()
'"http://www.huffingtonpost.com/andrew-brandt/the-peyton-predicament-pa_b_1271834.html" />'
>>> len(find_link)
15
>>>

看一下你的页面的html源代码,你会发现链接没有包含在内
&LT LINK&GT&LT /链路&GT图案.

实际上,模式是< link rel =“alternate”type =“text / html”href = links here. 这就是为什么你的正则表达式不起作用的原因.

内容总结

以上是互联网集市为您收集整理的用Python抓取RSS feed全部内容，希望文章能够帮你解决用Python抓取RSS feed所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端