首页 / PYTHON / Python请求：连接到代理服务器时忽略异常和错误

Python请求：连接到代理服务器时忽略异常和错误

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了Python请求：连接到代理服务器时忽略异常和错误，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含8230字，纯文字阅读大概需要12分钟。

内容图文

我用Python编写了第一个程序.

#This program casts votes in online poll using different proxy servers for each request.
#It works, but some proxy servers cause errors crashing the whole thing.
#To avoid that, I would like it to skip those servers and ignore the errors.

import requests
import time

#Votes to be cast
votes = 5 

#Makes proxy list
f=open('proxy2.txt')
lines=f.read().splitlines()
f.close()

#Vote counter
i = 1 

#Proxy list counter
j = 0 

while (i<=votes):

#Tests and moves to next proxy if there was a problem.
    try:
        r = requests.get('http://www.google.com')
    except requests.exceptions.RequestException:
        j = j + 1

#Headers copied from my browser. Some of them cause errors. Could you tell me why?
    headers =   {
                    'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
                    #'Accept-Encoding': 'gzip, deflate',
                    #'Accept-Language': 'pl-PL,pl;q=0.8,en-US;q=0.6,en;q=0.4',
                    #'Cache-Control': 'max-age=0',
                    #'Connection': 'keep-alive',
                    #'Content-Length': '101',
                    'Content-Type': 'application/x-www-form-urlencoded',
                    #'Host': 'www.mylomza.pl',
                    #'Origin': 'http://www.mylomza.pl',
                    #'Referer': 'http://www.mylomza.pl/home/lomza/item/11780-wybierz-miss-%C5%82ks-i-portalu-mylomzapl-video-i-foto.html',
                    #'Upgrade-Insecure-Requests': '1',
                    #'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36'
                }

    proxies =   {
                    'http': 'http://'+lines[j] #31.207.0.99:3128
                }

    r = requests.get('http://www.mylomza.pl/home/lomza/item/11780-wybierz-miss-%C5%82ks-i-portalu-mylomzapl-video-i-foto.html', headers=headers, proxies=proxies, timeout=10)

#The funny part - form, that I have to post, requires some kind of ID and this is my way of getting it :P Feel free to suggest an alternative way.
    userid = r.text[(22222-32):22222]

    print('Voter', userid, 'registered.')

    data = {
                'voteid': '141',
                'task_button': 'G?osuj',
                'option': 'com_poll',
                'task': 'vote',
                'id': '25',
                userid: '1'
               }

    r = requests.post('http://www.mylomza.pl/home/lomza/item/index.php', headers=headers, cookies=r.cookies, data=data, proxies=proxies, timeout=10)

    print('Vote nr', i, 'cast from', lines[i])

    i = i + 1
    j = j + 1

    time.sleep(1)

我需要使它处理异常和错误.

#Tests and moves to next proxy if there was a problem.
try:
    r = requests.get('http://www.google.com')
except requests.exceptions.RequestException:
    j = j + 1

除此之外,我可以使用另一种方式来实现这一目标：

#The funny part - form, that I have to post, requires some kind of ID and this is my way of getting it :P Feel free to suggest an alternative way.
    userid = r.text[(22222-32):22222]

有时我的方法不起作用(下面的示例).第一次投票通过了,第二次投票没有通过,然后全都崩溃了.

Voter 53bf55490ebd07d9c190787c5c6ca44c registered.
Vote nr 1 cast from 111.23.6.161:80
Voter  registered.
Vote nr 2 cast from 94.141.102.203:8080
Traceback (most recent call last):
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\packages\urllib3\connection.py", line 142, in _new_conn
    (self.host, self.port), self.timeout, **extra_kw)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\packages\urllib3\util\connection.py", line 91, in create_connection
    raise err
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\packages\urllib3\util\connection.py", line 81, in create_connection
    sock.connect(sa)
socket.timeout: timed out

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\packages\urllib3\connectionpool.py", line 578, in urlopen
    chunked=chunked)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\packages\urllib3\connectionpool.py", line 362, in _make_request
    conn.request(method, url, **httplib_request_kw)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\http\client.py", line 1083, in request
    self._send_request(method, url, body, headers)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\http\client.py", line 1128, in _send_request
    self.endheaders(body)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\http\client.py", line 1079, in endheaders
    self._send_output(message_body)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\http\client.py", line 911, in _send_output
    self.send(msg)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\http\client.py", line 854, in send
    self.connect()
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\packages\urllib3\connection.py", line 167, in connect
    conn = self._new_conn()
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\packages\urllib3\connection.py", line 147, in _new_conn
    (self.host, self.timeout))
requests.packages.urllib3.exceptions.ConnectTimeoutError: (<requests.packages.urllib3.connection.HTTPConnection object at 0x03612730>, 'Connection to 94.141.102.203 timed out. (connect timeout=10)')

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\adapters.py", line 403, in send
    timeout=timeout
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\packages\urllib3\connectionpool.py", line 623, in urlopen
    _stacktrace=sys.exc_info()[2])
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\packages\urllib3\util\retry.py", line 281, in increment
    raise MaxRetryError(_pool, url, error or ResponseError(cause))
requests.packages.urllib3.exceptions.MaxRetryError: HTTPConnectionPool(host='94.141.102.203', port=8080): Max retries exceeded with url: http://www.mylomza.pl/home/lomza/item/11780-wybierz-miss-%C5%82ks-i-portalu-mylomzapl-video-i-foto.html (Caused by ConnectTimeoutError(<requests.packages.urllib3.connection.HTTPConnection object at 0x03612730>, 'Connection to 94.141.102.203 timed out. (connect timeout=10)'))

During handling of the above exception, another exception occurred:

Traceback (most recent call last):
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\PollVoter.py", line 50, in <module>
    r = requests.get('http://www.mylomza.pl/home/lomza/item/11780-wybierz-miss-%C5%82ks-i-portalu-mylomzapl-video-i-foto.html', headers=headers, proxies=proxies, timeout=10)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\api.py", line 71, in get
    return request('get', url, params=params, **kwargs)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\api.py", line 57, in request
    return session.request(method=method, url=url, **kwargs)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\sessions.py", line 475, in request
    resp = self.send(prep, **send_kwargs)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\sessions.py", line 585, in send
    r = adapter.send(request, **kwargs)
  File "C:\Users\Adrian\AppData\Local\Programs\Python\Python35-32\lib\site-packages\requests\adapters.py", line 459, in send
    raise ConnectTimeout(e, request=request)
requests.exceptions.ConnectTimeout: HTTPConnectionPool(host='94.141.102.203', port=8080): Max retries exceeded with url: http://www.mylomza.pl/home/lomza/item/11780-wybierz-miss-%C5%82ks-i-portalu-mylomzapl-video-i-foto.html (Caused by ConnectTimeoutError(<requests.packages.urllib3.connection.HTTPConnection object at 0x03612730>, 'Connection to 94.141.102.203 timed out. (connect timeout=10)'))

解决方法:

似乎您向服务器发送了太多请求,这就是为什么会收到其他错误(例如request.packages.urllib3.exceptions.MaxRetryError)的原因,因为服务器可能会限制给定数量的连接数时间.您可以尝试处理输出中列出的所有异常,也可以尝试减少对您请求的url的尝试.

[编辑]或者,如果您要蛮力处理所有错误和异常,请尝试以下方法

except:
    j = j + 1

[编辑：]您可以尝试https：以及http：

[编辑]找到了：

If the remote server is very slow, you can tell Requests to wait forever for a response, by passing None as a timeout value and then retrieving a cup of coffee.

r = requests.get('https://github.com', timeout=None)

内容总结

以上是互联网集市为您收集整理的Python请求：连接到代理服务器时忽略异常和错误全部内容，希望文章能够帮你解决Python请求：连接到代理服务器时忽略异常和错误所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/682663.html

来源：【匿名】

【上一篇】读取以数字开头的CSV列名称(Python)【下一篇】浅谈PHP运行Python脚本的方法

更多 ►

【Python请求：连接到代理服务器时忽略异常和错误】教程文章相关的互联网学习教程文章

CSV文件分割与列异常处理的python脚本【代码】

csv文件通常存在如下问题： 1. 文件过大（需要进行文件分割）2. 列异常(列不一致，如元数据列为10列，但csv文件有些行是11列，或者4列)本脚本用于解决此问题。#coding=utf-8‘‘‘ 脚本说明用来解决csv文件的列异常问题（以逗号分隔符为例）：csv文件有些列含有换行符、逗号等特殊符号，这就导致csv文件出现列异常的情况。此脚本将csv文件输出成如下文件：源文件名-正确列-文件序号.csv 源文件名-错误列.csv 源文件名-info.txt 常用...

Python 异常处理【代码】

#python异常处理try:open("xxx.txt")#如果存在多个异常，try只会捕获第一个异常，不会执行第二个异常代码的print(hah)except NameError:print("变量未定义异常.") except FileNotFoundError:print("文件不存在异常")#异常被捕获了，就不会影响后面代码的执行print("我会继续执行.")#python异常处理try:11/0#open("xxx.txt")#print(hah)print("111111111")#当想捕获多个异常的，python3语法中支持元祖异常except (NameError,FileNot...

python异常处理【代码】

#!/usr/bin/pythonimport traceback try:1/0 #except Exception,e: # print traceback.format_exc()except Exception as e:print e #!/usr/bin/python import traceback try:1/0 #except Exception,e: # print traceback.format_exc()except Exception , e:print e Python的异常处理能力是很强大的，可向用户准确反馈出错信息。在Python中，异常也是对象，可对它进行操作。所有异常都是基类 Exception的成员。所有异常都从...

python-异常【图】

除零异常 ZeroDivisionError 名称异常 NameError 类型异常 TypeError 错误信息的获取:错误信息中最后一行的第一个单词捕获所有错误:try: num=int(input(‘请输入整数：‘)) #容易出错的代码except: print(‘你输入错误‘) #出错后，进行处理的代码根据错误类型进行捕获:try: num=int(input(‘请输入整数：‘)) #容易出错的代码 num = 8/numexcept ValueError : print(‘请输入正确的整数‘...

python的异常处理【图】

异常：就是不正常的情况，程序开发过程中错误和Bug都是补充正常的情况异常发生的后果：引发程序崩溃处理异常（容错）：包容出现的不正常的错误，保证持续的正常执行处理异常的方式--- try-except：异常捕获处理，如果抓到异常，则会处理，如果抓不到，则认为没有异常try：可能出现异常的代码except（异常名称） except可写可不写异常处理的目的：提高代码的稳定性python使用try处理的语法结构try：可能发生异常的代码except：前面...

Python常见异常

BaseException 　　　　所有异常的基类SystemExit　　　　　　　　　　　　解释器请求退出KeyboardInterrupt　　　　　　　　　用户中断执行(通常是输入^C)Exception　　　　　　　　　　　　常规错误的基类StopIteration 　　　　　　　　　　　　迭代器没有更多的值GeneratorExit 　　　　　　　　　　生成器(generator)发生异常来通知退出StandardError　　　　　　　　　　所有的内建标准异常的基类...

Python 文件&异常初学者笔记【代码】

文件读取整个文件with open(‘pi_30_digits.txt‘) as file_object :#Python在当前执行文件目录寻找指定文件#filename = 文件的绝对路径或相对路径#with open(filename) as file_object : #open()打开文件；with在不再需要访问文件后将其关闭contents = file_object.read()#读取文件内容为字符串类型；print(contents.rstrip())#read()读取到文件到结尾时会返回一个空字符逐行读取文件filename = ‘pi_digits.txt‘with open(fi...

Python 异常处理【代码】【图】

异常处理在编程过程中为了增加友好性，在程序出现bug时一般不会将错误信息显示给用户，而是现实一个提示的页面，通俗来说就是不让用户看见大黄页！！！python3 list = ["hello","world"] try:list[3] except IndexError as e:print("IndexError",e)except KeyError as e:print("KeyError", e)except ValueError as e:print("ValueError",e)# IndexError list index out of range python2list = ["hello","world"] try:list[3] exce...

python异常处理--try except else raise finally【代码】【图】

转载自https://www.cnblogs.com/bokeyuan11/p/9146607.html 写程序时遇到异常情况，程序可能无法正常运行。此时就需要引入异常处理1.try ...excepttry 后面写正常运行的程序代码，except即为异常情况 1 a=32 b=23 for i in range(5):4 try:5 a = a - 16 c=b/a7 print(c)8 9 except Exception as e: 10 print(e)#输出异常行为名称结果显示如下，异常行为的名称为（division by zero）2.tr...

Python自动化运维之12、异常处理及反射【代码】【图】

一、异常处理python异常：　　python的运行时错误称作异常　　(1)语法错误：软件的结构上有错误而导致不能被解释器解释或不能被编译器编译　　(2)逻辑错误：由于不完整或不合法的输入所致，也可能是逻辑无法生成、计算或者输出结果需要的过程无法执行等python异常是一个对象，表示错误或意外情况　　(1)在python检测到一个错误时，将触发一个异常　　　　python可以通常异常传导机制传递一个异常对象，发出一个异常情况出现的...

Python 简明教程 --- 23，Python 异常处理【代码】【图】

微信公众号：码农充电站pro 个人主页：https://codeshellme.github.io要么做第一个，要么做最好的一个。目录我们在编写程序时，总会不自觉的出现一些错误，比如逻辑错误，语法错误和一些其它的运行时错误等。逻辑错误：这种错误不会导致程序崩溃，它不容易被发现，只有在执行结果不是我们预期的时候，才会被发现。语法错误：这种错误是不符合语法规定的错误，说白了，就是编译器或者解释器无法理解的代码。出现这种错误时，程序是...

python常见异常分类与处理方法【代码】

Python常见异常类型大概分为以下类： 1.AssertionError：当assert断言条件为假的时候抛出的异常 2.AttributeError：当访问的对象属性不存在的时候抛出的异常 3.IndexError：超出对象索引的范围时抛出的异常 4.KeyError：在字典中查找一个不存在的key抛出的异常 5.NameError：访问一个不存在的变量时抛出的异常 6.OSError：操作系统产生的异常 7.SyntaxError：语法错误时会抛出此异常 8.TypeError：类型错误...

python笔记8-python的异常处理【图】

为什么要处理异常？不处理后面的代码就中断了！关键字：try except else finally语法：try：觉得可能异常的代码块　　 except 捕捉异常：　　　else:没有异常才执行的代码块 finally：退出try时总会执行的代码块总结了五种用法，如下所示：1:最简单的用法。try...except 这两个是关键字。try ：放你觉得有问题的代码，放监控代码except ：捕捉错误并进行处理实例：try:#下面放监控的代码print(a)except:#捕捉到了之...

[python] 之异常对象【代码】

一、异常对象　　类异常支持异常的层次结构：超类变成分类名称，而子类变成这个分类中特定种类的异常。except字句列出一个通用的异常超类，就可捕捉整个分类中的各种异常：任何特定的子类都可匹配。 1class General(Exception):pass 2class Specific1(General):pass 3class Specific2(General):pass 4 5def raise0():6 x=General()7raise x8 9def raise1(): 10 x=Specific1() 11raise x 1213def raise2(): 14 x=Specif...

Python之异常处理合集

PermissionError: [Errno 13] Permission deniedopen(filePath)中的filePath是一目录路径，而非目录路径先前打开的file文件对象未被关闭函数str(xxx)调用失败可能由于str函数被开发者的其他名为str(or Str)的【变量】、【类】、【函数】所覆写而导致str(xx)失效参考文献PermissionError: [Errno 13] Permission denied 如何解决原文：https://www.cnblogs.com/johnnyzen/p/10899826.html

首页 / PYTHON / Python请求：连接到代理服务器时忽略异常和错误

Python请求：连接到代理服务器时忽略异常和错误

内容导读

内容图文

内容总结

内容备注

内容手机端

【Python请求：连接到代理服务器时忽略异常和错误】教程文章相关的互联网学习教程文章

CSV文件分割与列异常处理的python脚本【代码】

Python 异常处理【代码】

python异常处理【代码】

python-异常【图】

python的异常处理【图】

Python常见异常

Python 文件&异常初学者笔记【代码】

Python 异常处理【代码】【图】

python异常处理--try except else raise finally【代码】【图】

Python自动化运维之12、异常处理及反射【代码】【图】

Python 简明教程 --- 23，Python 异常处理【代码】【图】

python常见异常分类与处理方法【代码】

python笔记8-python的异常处理【图】

[python] 之异常对象【代码】

Python之异常处理合集

PYTHON - 相关标签

服务器 - 相关标签

错误 - 相关标签

PYTHON - 技术教程分类

PYTHON - 最新教程

PYTHON - 最热教程