07 Python爬虫验证码处理

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了07 Python爬虫验证码处理，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含3590字，纯文字阅读大概需要6分钟。

内容图文

　　大部分门户网站在进行登录的时候，如果用户连续登录的次数超过3次或者5次的时候，就会在登录页中动态生成验证码。通过验证码达到分流和反爬的效果。

一. 云打码平台处理验证码的流程：

1.对携带验证码的页面数据进行抓取
2.可以将页面数据中验证码进行解析，验证码图片下载到本地
3.可以将验证码图片提交给三方平台进行识别，返回验证码图片上的数据值
    云打码平台：
        1.在官网中进行注册（普通用户和开发者用户）
        2.登录开发者用户：
            1.实例代码的下载（开发文档-》调用实例及最新的DLL-》PythonHTTP实例下载）
            2.创建一个软件：我的软件-》添加新的软件
        3.使用示例代码中的源码文件中的代码进行修改，让其识别验证码图片中的数据值

　　代码：

 1 #该函数就调用了打码平台的相关的接口对指定的验证码图片进行识别，返回图片上的数据值
 2 def getCode(codeImg):
 3     # 云打码平台普通用户的用户名
 4     username    = 'bobo328410948'
 5 
 6     # 云打码平台普通用户的密码
 7     password    = 'bobo328410948'                            
 8     
 9     # 软件ＩＤ，开发者分成必要参数。登录开发者后台【我的软件】获得！
10     appid       = 6003                                     
11 
12     # 软件密钥，开发者分成必要参数。登录开发者后台【我的软件】获得！
13     appkey      = '1f4b564483ae5c907a1d34f8e2f2776c'    
14 
15     # 验证码图片文件
16     filename    = codeImg                        
17 
18     # 验证码类型，# 例：1004表示4位字母数字，不同类型收费不同。请准确填写，否则影响识别率。在此查询所有类型 http://www.yundama.com/price.html
19     codetype    = 3000
20 
21     # 超时时间，秒
22     timeout     = 20                                    
23 
24     # 检查
25     if (username == 'username'):
26         print('请设置好相关参数再测试')
27     else:
28         # 初始化
29         yundama = YDMHttp(username, password, appid, appkey)
30 
31         # 登陆云打码
32         uid = yundama.login();
33         print('uid: %s' % uid)
34 
35         # 查询余额
36         balance = yundama.balance();
37         print('balance: %s' % balance)
38 
39         # 开始识别，图片路径，验证码类型ID，超时时间（秒），识别结果
40         cid, result = yundama.decode(filename, codetype, timeout);
41         print('cid: %s, result: %s' % (cid, result))
42         
43         return result

 1 import requests
 2 from lxml import etree
 3 import json
 4 import time
 5 import re
 6 #1.对携带验证码的页面数据进行抓取
 7 url = 'https://www.douban.com/accounts/login?source=movie'
 8 headers = {
 9     'User-Agent': 'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.77 Mobile Safari/537.36'
10 }
11 page_text = requests.get(url=url,headers=headers).text
12 
13 #2.可以将页面数据中验证码进行解析，验证码图片下载到本地
14 tree = etree.HTML(page_text)
15 codeImg_url = tree.xpath('//*[@id="captcha_image"]/@src')[0]
16 #获取了验证码图片对应的二进制数据值
17 code_img = requests.get(url=codeImg_url,headers=headers).content
18 
19 
20 #获取capture_id
21 '<img id="captcha_image" src="https://www.douban.com/misc/captcha?id=AdC4WXGyiRuVJrP9q15mqIrt:en&amp;size=s" alt="captcha" class="captcha_image">'
22 c_id = re.findall('<img id="captcha_image".*?id=(.*?)&amp.*?>',page_text,re.S)[0]
23 with open('./code.png','wb') as fp:
24     fp.write(code_img)
25 
26 #获得了验证码图片上面的数据值
27 codeText = getCode('./code.png')  
28 print(codeText)
29 #进行登录操作
30 post = 'https://accounts.douban.com/login'
31 data = {
32     "source": "movie",
33     "redir": "https://movie.douban.com/",
34     "form_email": "15027900535",
35     "form_password": "bobo@15027900535",
36     "captcha-solution":codeText,
37     "captcha-id":c_id,
38     "login": "登录",
39 }
40 print(c_id)
41 login_text = requests.post(url=post,data=data,headers=headers).text
42 with open('./login.html','w',encoding='utf-8') as fp:
43     fp.write(login_text)

 

内容总结

以上是互联网集市为您收集整理的07 Python爬虫验证码处理全部内容，希望文章能够帮你解决07 Python爬虫验证码处理所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

---