【python】  AttributeError: module 'urllib.request' has no attribute 'post'【图】

在导入 import requests 这个模块的时候报错，看下面的错误代码： AttributeError: module urllib.request has no attribute post 这时候就要重装一下 requests这个模块了：下面是代码命令：pip install requests这是小虾的安装示意图：小虾用的是python3.7版本的，所以使用的命令是pip3.7 install requests 不后悔过去，不幻想未来，把握好现在，就是对自己最好的交代!!!!!!!!!!!!!

第14.9节 Python中使用urllib.request+BeautifulSoup获取url访问的基本信息【代码】

利用urllib.request读取url文档的内容并使用BeautifulSoup解析后，可以通过一些基本的BeautifulSoup对象输出html文档的基本信息。以博文《第14.6节 使用Python urllib.request模拟浏览器访问网页的实现代码》访问为例，读取和解析代码如下： >>> from bs4 import BeautifulSoup >>> import urllib.request >>> def getURLinf(url): header = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like...

Python,基本问题：如何使用urllib.request.urlretrieve下载多个url【代码】

我有以下功能齐全的工作代码：import urllib.request import zipfileurl = "http://url.com/archive.zip?key=7UCxcuCzFpYeu7tz18JgGZFAAgXQ2sop" filename = "C:/test/archive.zip" destinationPath = "C:/test"urllib.request.urlretrieve(url,filename) sourceZip = zipfile.ZipFile(filename, 'r')for name in sourceZip.namelist():sourceZip.extract(name, destinationPath) sourceZip.close()它会完美地工作几次,但因为我从中...

在Python中使用Beautifulsoup和Urllib2,如何找到特定标签包围的数据？【代码】

作为BeautifulSoup和Urllib2的介绍,我想我会做一个基本的抓取程序,它可以在一个名为lolking.net的视频游戏网站上获取有关给定玩家的信息.每个用户都有一个不包含用户名的加扰网址,因此我必须从网站的HTML中删除播放器的网址扩展名,以便能够访问其用户页面. 这是我可能遇到的示例字符串：<div class="search_result_item" onclick="window.location='/summoner/na/26670961'; return false;"><div style="display: table-cell; text...

python – 为urllib2.urlopen()遇到麻烦引发异常【代码】

我正在使用以下代码,我无法弄清楚为什么当urlopen()失败时它不会引发异常. 在我的特殊情况下,我知道为什么它失败..我的网址没有http：//在他们面前…但我想抓住这些情况,以便脚本可以继续运行我的代码而不是退出.req = urllib2.Request(link)try:url = urllib2.urlopen(req)except urllib2.URLError, e:print e.codeprint e.read()return False而我正在……Traceback (most recent call last): File "./getURLs.py", line 141, in ...

python urllib【代码】

urllib.request.urlopen from utllib import request resp = request.urlopen('http://www.baidu.com') print(resp.read())import ssl from urllib import request import jsonif __name__ == '__main__':context = ssl._create_unverified_context()url = r'https://api.lab.wayougou.com/api/stocks/rank'response = request.urlopen(url, context=context)html = json.loads(response.read())print(type(html))print(html)print...

python3报错：import urllib2 ModuleNotFoundError

【使用python urllib时出现[SSL: CERTIFICATE_VERIFY_FAILED]报错的解决方案】 -- 2019-08-11 19:45:41

原文: http://106.13.73.98/__/81/ 首先，这个报错是告诉你，你的证书有问题. 其次，出现这个问题的原因，在于Python本身.问题原因 Python升级到2.7.9以后，引入了一个新特性. 当使用urllib打开https的链接时，会检验一次ssl证书. 而当目标网站使用的是自签名证书时，就会抛出urllib2.URLError的错误. 所以在爬取https协议的网站或伪装请求头都会导致这个错误. ***解决方案 方案一 全局取消证书验证 import ssl ssl._create_defau...

python urllib2中的自定义方法【代码】

使用urllib2,我们能够使用“GET”或“POST”以外的方法(提供数据时)吗？ 我挖到了库中,似乎使用GET或POST的决定“方便”与请求中是否提供数据有关. 例如,我想与CouchDB数据库进行交互,这需要诸如’DEL’,’PUT’之类的方法.我想要urllib2的处理程序,但需要自己进行方法调用. 我不希望将第三方模块导入我的项目,例如CouchDB python api.所以,请不要走那条路.我的实现必须使用python 2.6附带的模块. (我的设计规范要求使用准系统Port...

Python3 – urllib.request权限被拒绝【代码】

当我尝试使用urllib.request.urlretrieve函数在python 3.3.2中下载文件时,出现以下错误：Exception in Tkinter callback Traceback (most recent call last):File "C:\Python33\lib\tkinter\__init__.py", line 1475, in __call__return self.func(*args)File "C:\Python33\lib\site-packages\downloader.py", line 17, in startdownloadurllib.request.urlretrieve(url, file, reporthook)File "C:\Python33\lib\urllib\request.p...

带有自签名证书的Python 3 urllib【代码】

我正在尝试使用Python从内部服务器下载一些数据.由于它是内部的,因此它使用自签名证书. (我们不想向Verisign支付那些永远不会出现的服务器.)Python 2.6版本的代码运行良好.response = urllib2.urlopen(URL) data = csv.reader(response)我现在正在尝试更新到Python 3.4(长话,不要问.)但是,使用Python 3的urllib失败：response = urllib.request.urlopen(URL)它会抛出CERTIFICATE_VERIFY_FAILED错误.urllib.error.URLError: <urlope...

如何使用urllib2使用Python对站点进行身份验证？【代码】

在Stackoverflow和网络上阅读了很多内容后,我仍然在努力让事情发挥作用. 我的挑战：使用Python和urllib2访问我所属的网站的受限制部分. 从我读过的代码应该是这样的：mgr = urllib2.HTTPPasswordMgrWithDefaultRealm()url = 'http://www.domain.com'mgr.add_password(None, url, 'username', 'password') handler = urllib2.HTTPBasicAuthHandler(mgr) opener = urllib2.build_opener(handler)urllib2.install_opener(opener)try:r...

python – 如何在连接urllib2后确定服务器的IP地址？【代码】

我正在使用urllib2从服务器下载数据.但我需要确定我连接的服务器的IP地址.import urllib2 STD_HEADERS = {'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8','Accept-Charset': 'ISO-8859-1,utf-8;q=0.7,*;q=0.7','Accept-Language': 'en-us,en;q=0.5','User-Agent': 'Mozilla/5.0 (X11; U; Linux x86_64;en-US;rv:1.9.2.12) Gecko/20101028 Firefox/3.6.12'} request = urllib2.Request(url, Non...

python3 AttributeError: module 'urllib' has no attribute 'urlencode'

错误代码：data = urllib.urlencode(data) 错误原因：python2和python3的urllib结构是有所不同的，所以不能这样用 解决方案：data = urllib.parse.urlencode(data) 原文链接：https://blog.csdn.net/zhongyuchen/article/details/78370908

urllib2比python3中的请求慢

我用python简单地调用api.github.gist.我一开始尝试过urllib2,花了我大约10秒！请求不到1个senond 我在合作网络下,使用代理.这两个库在代理下有不同的默认行为吗？ 我用fiddler检查网络.在这两种情况下,http请求都在大约40ms内完成.那么urllib花费的时间在哪里？解决方法:DNS缓存最有可能加快请求速度. DNS查询可能需要花费大量时间在企业网络中,不知道为什么,但我经历了同样的事情.您第一次使用urllib2 DNS发送请求时查询,缓慢和缓...

如何使用python urllib在HTTP / 1.1中保持活力【代码】

现在我这样做：(Python3,urllib)url = 'someurl' headers = '(('HOST', 'somehost'), / ('Connection', 'keep-alive'),/('Accept-Encoding' , 'gzip,deflate')) opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor()) for h in headers:opener.addheaders.append(x) data = 'some logging data' #username, pw etc. opener.open('somesite/login.php, data)res = opener.open(someurl) data = res.read() ...

如何使用python的urllib2库只请求一次验证URL,而不是两次【代码】

通常,我们请求一个带有python urllib2库的认证url,用法如this page所述,但这会导致2个服务器请求,第一个响应401错误,然后第二个是客户端编码username / passwd into验证标头和请求再次.但是,如果您确实知道领域和(用户名,密码),您只能直接访问该网址一次.我可以通过将身份验证信息编码到请求标头中来执行此操作,并且它只请求一次,但我无法使用HTTPPasswordMgrWithDefaultRealm和相关类来执行此操作. >只有一次请求代码：import url...

使用Python / urllib / beautifulsoup从URL批量下载文本和图像？【代码】

我一直在浏览这里的几篇帖子,但我无法用Python从批量下载图片和文本来给定URL.import urllib,urllib2 import urlparse from BeautifulSoup import BeautifulSoup import os, sysdef getAllImages(url):query = urllib2.Request(url)user_agent = "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; .NET CLR 1.1.4322; .NET CLR 1.0.3705)"query.add_header("User-Agent", user_agent)page = BeautifulSoup(urllib2.urlopen(que...

Python urllib开放问题【代码】

我正在尝试从http://book.libertorrent.com/获取数据,但目前我的失败很严重,因为响应中存在一些额外的数据(标题).我的代码非常简单：response = urllib.urlopen('http://book.libertorrent.com/login.php') f = open('someFile.html', 'w') f.write(response.read())read()返回：Date: Fri, 09 Nov 2012 07:36:54 GMT Content-Type: text/html; charset=utf-8 Transfer-Encoding: chunked Connection: close Cache-Control: no-cac...

python – 如何使用urllib2将经过身份验证的代理例外应用于开启工具？【代码】

在Windows上使用urllib2(也许是urllib)时,python似乎神奇地选择了应用于InternetExplorer的经过身份验证的代理设置.但是,它似乎没有检查和处理高级设置“例外”列表. 有没有办法让它来处理例外列表？或者,忽略IE代理设置并应用我自己的代理开启程序来解决此问题？ 我曾经玩过创建代理开启器,但无法让它工作.这是我设法挖掘的内容,但我仍然没有看到如何/在哪里应用任何异常,我甚至不确定这是否正确：proxy_info = {'host':'myproxy....