首页 > 编程语言> 文章详细

Python爬虫练习：爬取阴阳师高清大图

2020-09-19 21:01:17 阅读：254 来源： 互联网

标签：beforeAwake name 阴阳师 Python 大图 headers data response png

前言

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。

基本环境配置

python 3.6
pycharm
requests

目标网页

经过一些系列的网页分析，可以发现它的图片地址

https://yys.res.netease.com/pc/zt/20161108171335/data/shishen_big_beforeAwake/201.png
https://yys.res.netease.com/pc/zt/20161108171335/data/shishen_big_afterAwake/201.png
https://yys.res.netease.com/pc/zt/20161108171335/data/shishen_skin/201-1.png

多看几张式神的图片后可以发现，每个图片所改变的是式神的 ID 值

可以通过开发者工具抓包，找到数据接口

请求数据

获得json数据

import requests
url = 'https://yys.res.netease.com/pc/zt/20161108171335/js/app/all_shishen.json'
headers = {
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}
response = requests.get(url=url, headers=headers)
html_data = response.json()

解析数据

获取 id 值以及式神名字
构建图片地址

for i in html_data:
    num_id = i['id']
    name = i['name']
    beforeAwake = 'https://yys.res.netease.com/pc/zt/20161108171335/data/shishen_big_beforeAwake/{}.png'.format(num_id)
    afterAwake = 'https://yys.res.netease.com/pc/zt/20161108171335/data/shishen_big_afterAwake/{}.png'.format(num_id)
    skin = 'https://yys.res.netease.com/pc/zt/20161108171335/data/shishen_skin/{}-1.png'.format(num_id)

    beforeAwake_response = requests.get(url=beforeAwake, headers=headers)
    beforeAwake_name = name + '初始' + '.png'
    
    afterAwake_response = requests.get(url=beforeAwake, headers=headers)
    afterAwake_name = name + '觉醒' + '.png'
    
    skin_response = requests.get(url=beforeAwake, headers=headers)
    skin_name = name + '皮肤' + '.png'

保存数据

path = 'D:\\python\\demo\\阴阳师\\img\\'
def download(name, response):
    with open(path + name, mode='wb') as f:
        f.write(response.content)

完整代码

import requests
import pprint
url = 'https://yys.res.netease.com/pc/zt/20161108171335/js/app/all_shishen.json'
path = 'D:\\python\\demo\\阴阳师\\img\\'

headers = {
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}
def download(name, response):
    with open(path + name, mode='wb') as f:
        f.write(response.content)

response = requests.get(url=url, headers=headers)
html_data = response.json()
for i in html_data:
    num_id = i['id']
    name = i['name']

    beforeAwake = 'https://yys.res.netease.com/pc/zt/20161108171335/data/shishen_big_beforeAwake/{}.png'.format(num_id)
    afterAwake = 'https://yys.res.netease.com/pc/zt/20161108171335/data/shishen_big_afterAwake/{}.png'.format(num_id)
    skin = 'https://yys.res.netease.com/pc/zt/20161108171335/data/shishen_skin/{}-1.png'.format(num_id)

    beforeAwake_response = requests.get(url=beforeAwake, headers=headers)
    beforeAwake_name = name + '初始' + '.png'
    download(beforeAwake_name, beforeAwake_response)

    afterAwake_response = requests.get(url=beforeAwake, headers=headers)
    afterAwake_name = name + '觉醒' + '.png'
    download(afterAwake_name, afterAwake_response)

    skin_response = requests.get(url=beforeAwake, headers=headers)
    skin_name = name + '皮肤' + '.png'
    download(skin_name, skin_response)
    print('正在下载{}图鉴'.format(name))

实现效果

标签：beforeAwake,name,阴阳师,Python,大图,headers,data,response,png
来源： https://www.cnblogs.com/hhh188764/p/13697587.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

ICode9