python – 如何在连接urllib2后确定服务器的IP地址？【代码】

我正在使用urllib2从服务器下载数据.但我需要确定我连接的服务器的IP地址.import urllib2 STD_HEADERS = {'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8','Accept-Charset': 'ISO-8859-1,utf-8;q=0.7,*;q=0.7','Accept-Language': 'en-us,en;q=0.5','User-Agent': 'Mozilla/5.0 (X11; U; Linux x86_64;en-US;rv:1.9.2.12) Gecko/20101028 Firefox/3.6.12'} request = urllib2.Request(url, Non...

python urllib2中的自定义方法【代码】

使用urllib2,我们能够使用“GET”或“POST”以外的方法(提供数据时)吗？ 我挖到了库中,似乎使用GET或POST的决定“方便”与请求中是否提供数据有关. 例如,我想与CouchDB数据库进行交互,这需要诸如’DEL’,’PUT’之类的方法.我想要urllib2的处理程序,但需要自己进行方法调用. 我不希望将第三方模块导入我的项目,例如CouchDB python api.所以,请不要走那条路.我的实现必须使用python 2.6附带的模块. (我的设计规范要求使用准系统Port...

python – 使用urllib2时出现“TypeError：需要浮动”【代码】

我正在遵循发布仅应用程序请求的twitter API documentation.执行步骤2：获取承载令牌时发生错误.我不熟悉追溯中这些模块的细节,有人能告诉我如何使代码工作吗？ 这是我的代码：import urllib, urllib2, base64consumer_key = 'KmdCpWGtKEtQ0EdZyQCEZGmcX' consumer_secret = 'B3I0RcG8vsCC1Y4LBIHIlNvm2NrSB9smlPovYnKYjCyUoNBcMd' consumer_key_secret = urllib.quote(consumer_key) + ':' + urllib.quote(consumer_secret) token...

python3报错：import urllib2 ModuleNotFoundError

python – 为urllib2.urlopen()遇到麻烦引发异常【代码】

我正在使用以下代码,我无法弄清楚为什么当urlopen()失败时它不会引发异常. 在我的特殊情况下,我知道为什么它失败..我的网址没有http：//在他们面前…但我想抓住这些情况,以便脚本可以继续运行我的代码而不是退出.req = urllib2.Request(link)try:url = urllib2.urlopen(req)except urllib2.URLError, e:print e.codeprint e.read()return False而我正在……Traceback (most recent call last): File "./getURLs.py", line 141, in ...

在Python中使用Beautifulsoup和Urllib2,如何找到特定标签包围的数据？【代码】

作为BeautifulSoup和Urllib2的介绍,我想我会做一个基本的抓取程序,它可以在一个名为lolking.net的视频游戏网站上获取有关给定玩家的信息.每个用户都有一个不包含用户名的加扰网址,因此我必须从网站的HTML中删除播放器的网址扩展名,以便能够访问其用户页面. 这是我可能遇到的示例字符串：<div class="search_result_item" onclick="window.location='/summoner/na/26670961'; return false;"><div style="display: table-cell; text...

python – urllib2中的未知url类型错误【代码】

我在SO上搜索了很多类似的问题,但没有找到与我的案例完全匹配的问题. 我正在尝试使用python 2.7下载视频 这是我下载视频的代码import urllib2 from bs4 import BeautifulSoup as bswith open('video.txt','r') as f:last_downloaded_video = f.read()webpage = urllib2.urlopen('http://*.net/watch/**-'+last_downloaded_video)soup = bs(webpage) a = [] for link in soup.find_all('a'):if link.has_attr('data-video-id'):a.ap...

python urllib2返回垃圾【代码】

我正在尝试使用python下载一个网页并访问页面上的一些元素.我下载页面时遇到问题：内容是垃圾.这是页面的第一行：?í}év?H2??òSd±?mé·’?–%?hμ?%ùjI??J??ID(‰??{?1?÷???í}’ù"à""’?d÷t?N‰$–\"??????ü?q?í?ù?'???-g?án?m–úq<ü1R1??._?? ìU?v?]1?gJìq?í’?%z?[??3?[(,jü?è?ú,í~ìyX;y‰ùò×f)?7q…Jzéì?F<T?]-Ua这个问题只发生在以下网站：http://kickass.to.他们有可能以某种方式保护他们的页面吗？这是我的python代码：import ...

python爬虫(四)_urllib2：handle处理器和自定义opener【代码】

opener和handleer我们之前一直使用的是urllib2.urlopen(url)这种形式来打开网页，它是一个特殊的opener(也就是模块帮我们建好的)，opener是urllib2.OpenerDirectory的实例。但是基本的urlopen()方法不支持代理、cookie等其他的HTTP/HTTPS高级功能。所以要支持这些功能：使用相关的Handler处理器来创建特定功能的处理器对象； 然后通过urllib2.build_opener()方法来使用这些处理器对象，创建自定义opener对象； 使用自定义的opener对...

使用python urllib / urllib2发出一个http POST请求来上传文件【代码】

我想发一个POST请求,使用python将文件上传到Web服务(并得到响应).例如,我可以使用curl执行以下POST请求：curl -F "file=@style.css" -F output=json http://jigsaw.w3.org/css-validator/validator如何使用python urllib / urllib2发出相同的请求？我到目前为止最接近的是：with open("style.css", 'r') as f:content = f.read() post_data = {"file": content, "output": "json"} request = urllib2.Request("http://jigsaw.w3.or...