在requests中使用proxy代理访问 使用前先更新requests版本为支持socks的版本。 ? 先pip安装对应库:? >> pip install -U requests[socks] ? 脚本添加和使用代理: ? import requests .... proxy = { 'http': 'socks5://10.20.3.10:7071', 'https': 'socks5://10.20.3.10:7071' } .... #?使用代理发送请求 .... ret = requests.post(url, json=params, proxies=proxy).content ....
request的各种方法主要用来处理客户端浏览器提交的请求中的各项参数和选项。如POST,GET最常用的两种请求 官方文档：http://docs.python-requests.org/en/master/user/quickstart/# 安装方法：https://www.cnblogs.com/cheng10/p/9875207.html unittest：https://docs.python.org/3/library/unittest.html 简单小练习：https://www.cnblogs.com/cheng10/p/10431310.html HTMLTestRunner配置方法：https://www.cnblogs.com/cheng10/p...
import unittestimport requestsdef add(a, b): print(前置条件！！！！！：如登录) return a + bclass TestAAA(unittest.TestCase):# 一次性的前置条件， 运行优先级：1 @classmethod # 调用setUpClass方法需要此修饰符 # 调用setUpClass方法 def setUpClass(cls): add(1, 2) # 调用add方法，且只运行一次，如登录，只需登录一次 cls.s = requests.session() ...
解决问题：每次密码都是变化的，无法通过账号密码登录（总不能每次去fiddler复制吧？？？？）解决思路：1.先用selenium调用浏览器（不会selenium的自己想办法了），2.登录后从浏览器里面抓取cookies3.把cookies传给s4.这样就成功成功了如果登录有验证码怎么办？比如：博客园参考这篇：http://www.cnblogs.com/yoyoketang/p/8610779.html每次都会启动浏览器界面，不想看到浏览器启动怎么办？解决办法1：用chrome的headless模式 htt...
# 爬图片# 目标网站：http://699pic.com/sousuo-218808-13-1.htmlimport requestsfrom bs4 import BeautifulSoupimport osr = requests.get(http://699pic.com/sousuo-218808-13-1.html)# r.content # 返回的是字节流soup = BeautifulSoup(r.content, html.parser) # 用html解析器，查找r.content# tu = soup.find_all(img) # 查找所有的标签名字为“img”的对象tu = soup.find_all(class_="lazy") # 查找所有的标签名字为“...
安装：beautifulsoup4 from bs4 import BeautifulSoupyoyo = open(yoyo.html, r) # 以读的方式打开“yoyo.html”文件# print(yoyo.read()) # 此方法打开的是一个字符串，内容没有层级结构# yoyo.close()soup = BeautifulSoup(yoyo, html.parser) # 此时打印出来的效果与.read的一致# print(soup.prettify()) # 此时打印出来为有层级的html格式# 通过soup对象，去找tag标签head = soup.headprint(head) # <head>...
# 传json参数 import requests url = xxxxxxxx body = { xxx: xxx, xxx: xxx } # body是json格式的 r = requests.post(url, json=body) print(r.text) # 第二种方法 import json r = requests.post(url, data=json.dumps(body)) print(r.text) import requestsurl = "http://v.juhe.cn/weather/index" par = { "cityname": "深圳", # 城市名或城市ID，如："苏州"，需要utf8 urlencode"dtype": "json", # ...
# url编码与解码 from urllib import parse url = http://zzk.cnblogs.com/s/blogpost?Keywords=中文 a = 中文 b = parse.quote(a) # 转urlencode编码 print(b) print(parse.quote(b)) # 转第二次（若有需求） # 解码 c = %E4%B8%AD%E6%96%87 d = parse.unquote(c) print(d) # 解码 f = http://zzk.cnblogs.com/s/blogpost?Keywords=%E4%B8%AD%E6%96%87 print(parse.unquote(f))
# 1、requests里面自带解析器转字典 print(r.json()) print(type(r.json())) # 取出json中的result_sk_temp字段 # {"resultcode":"200","reason":"查询成功","result":{"sk":{"temp":"28","wind_direction":"东南风","wind_strength":"2级" result = r.json()["result"][sk][temp] print(result) # 2、json模块转字典 import json print(json.loads(r.text)) # json格式的str转dict print(type(json.loads(r.text))) # 查看返...
import requests import reurl = xxxx r = requests.post(url) # 正则公式： postid = re.findall(r"(.+?)", r.url) # r.url:匹配的url对象 # ^表示从头开始匹配 u = re.findall(r"^(.+?)\?", url)# 如果参数在末尾，匹配到最后 # 参数：postid=35454&actiontip=按时发 res = re.findall(r"actiontip=(.+?)$", r.url) # 知道字符串前、后，取中间，这里的前、后所代表的值须为固定不变的 postid = re.findall(r"前(.+?)后", r....
1、 http简介：http（超文本传输协议）是一个基于请求与响应模式的、无状态的、应用层的协议 2、 url详解：百度搜索的一个url地址：https://www.baidu.com/s?wd=%E4%B8%8A%E6%B5%B7%E6%82%A0%E6%82%A0%E5%8D%9A%E5%AE%A2&rsv_spt=1&rsv_iqid=0x91baaabd00070ba2&issp=1&f=8&rsv_bp=1&rsv_idx=2 1.http/https: 协议类型2.host：主机地址或域名--192.168.x.xx:8080 地址+端口号--www.xxx.com 域名--localhost:8080 localhost是本机地...
url = 接口地址 r = requests.get(url) # 发送get请求 print(r.status_code) # 打印状态码，若有重定向，返回的是重定向之后的代码 print(r.headers) # 打印返回的报头（头部） print(r.text) # 查看返回结果的文本形式 r.status_code # 响应状态码 r.content ...
get请求： 1、get请求（无参数）： 2、get请求（带参数）： 接口地址：http://japi.juhe.cn/qqevaluate/qq 返回格式：json 请求方式：get post 请求示例：http://japi.juhe.cn/qqevaluate/qq?key=您申请的appKey&qq=295424589 接口备注：根据传入的参数 qq 号码和您申请的 appKey 测试 qq 的吉凶 请求参数说明（入参） ： 名称 必填 类型 说明 key 是 string 您申请的 appKey：8dbee1fcd8627fb6699...
#Author:huaiq user_dict ={}#初始化一个空字典 user_list =[]#初始化一个空列表，程序可以向里面加入元素login_error_count=0 #用于计数非表内用户名错误次数 #使用while无限循环输入 while True:username = input("username:") #输入用户名passwd = input("password:") #输入密码users_data = open(rD:\360Downloads\userpasswd.txt, r) # 登陆用户读取数据文件 userpasswd.txt#循环遍历打开的数据for user_data in users_...
没什么好说的，直接上代码。import requests # import json import time import random import hashlibtranslate = input(>>>>>>>) url_1 = http://fanyi.youdao.com/translate_o?smartresult=dict&smartresult=rule ts = str(int(time.time()*1000)) salt = ts + str(int(random.random()*10)) print(ts,salt) md5 = hashlib.md5() md5.update(("fanyideskweb" + translate + salt + "p09@Bn{h02_BIEe]$P^nG").encode(utf8)) sign...