用Python3Request爬取英雄联盟皮肤、单线程爬取

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了用Python3Request爬取英雄联盟皮肤、单线程爬取，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含1853字，纯文字阅读大概需要3分钟。

内容图文

和王者荣耀相类似

链接：https://www.cnblogs.com/wxzbk/p/10981098.html

"""
Hero_LOL
"""
import requests
import re
import threading


def hero(hero_name, hero_num):
    #统一前戳
    h_l = "https://ossweb-img.qq.com/images/lol/web201310/skin/big"
    # 逐一遍历英雄
    print(hero_num.__len__())
    num = 0  # 为了获取英雄的号码
    for i in hero_num:
        # 逐一遍历皮肤，此处假定一个英雄最多15个皮肤
        for sk_num in range(0, 20):  # 从第一个开始，没有第0个皮肤
            if len(i)==2:
                hsl = h_l + i + "0" +str(sk_num) +".jpg"
            else:
                hsl = h_l + i + "00" + str(sk_num) + ".jpg"
            hl = requests.get(hsl)
            if hl.status_code == 200:
                filename = "LOL/" + str(hero_name[num]) + str(sk_num) + ".jpg"
                print("此时正在下载：" + filename)
                with open(filename, "wb") as f:
                    f.write(hl.content)
            else:
                break
        num += 1


def main():
    """
    #获取全部英雄数据
    :return:
    """
    #JS_url
    Hero_url =  "https://lol.qq.com/biz/hero/champion.js"
    #User-Agent伪装浏览器标识
    header = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.109 Safari/537.36'}
    #Get source code(获取源代码)
    response = requests.get(Hero_url,headers = header)
    #decode 编码为GBK，方便下方使用正则遍历
    response = response.content.decode("GBK")
    #regex（正则表达式）
    reg = """keys":([\s\S]*?),"data"""
    #预编译
    regex = re.compile(reg,re.IGNORECASE) #第一个参数 正则表达式 第二个参数忽略的意思，忽略大小写
    #findall 就是获取response内所有符合规则的数据，返回值为list
    response_s = regex.findall(response)
    #也就是所有符合规则的数据放到了列表里，如果只有一个，那就是list[0]
    response_s = response_s[0]
    #通过eval转换为一个dict，具体功能自己查（其实我也没大懂）
    res = eval(response_s)
    #get the keys in the dict(再转换为list)
    hero_num  = list(res.keys()) #Hero_number
    #get the values in the dict (再转换为list)
    hero_name = list(res.values())#Hero_name

    hero(hero_name,hero_num)
    t1 = threading.Thread(target=hero,args=(hero_name,hero_num))
    t1.start()
   
if __name__ == '__main__':
    main()

内容总结

以上是互联网集市为您收集整理的用Python3Request爬取英雄联盟皮肤、单线程爬取全部内容，希望文章能够帮你解决用Python3Request爬取英雄联盟皮肤、单线程爬取所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端