一、分析需要爬取的网站

①、打开官方王者荣耀壁纸网站

  • 网站地址:https://pvp.qq.com/web201605/wallpaper.shtml

②、快捷键F12,调出控制台进行抓包

③、找到正确的链接并分析

④、查看返回数据格式

⑤、解析url链接

⑥、查看url内容是否是所需图片,发现其实是缩略图

⑦、那就去分析网站,随便点开一张壁纸,查看指定格式的链接

⑧、找到目标地址

⑨、分析目标链接和缩略图的链接区别

  • 缩略图:http://shp.qpic.cn/ishow/2735090714/1599460171_84828260_8311_sProdImgNo_6.jpg/200
  • 目标图:http://shp.qpic.cn/ishow/2735090714/1599460171_84828260_8311_sProdImgNo_6.jpg/0
  • 可以知道,将指定格式的缩略图地址后面200替换成0就是目标真实图片

二、爬虫代码

①、至此,爬虫分析完成,爬虫完整代码如下

#!/usr/bin/env python# encoding: utf-8'''#-------------------------------------------------------------------
# CONFIDENTIAL --- CUSTOM STUDIOS#-------------------------------------------------------------------
## @Project Name : 王者荣耀壁纸下载
## @File Name : mengy7762
## @Programmer : Felix## @Start Date : 2021/9/8 14:42
## @Last Update : 2021/9/8 14:42##-------------------------------------------------------------------'''
import os, time, requests, json,
refrom retrying import retryfrom urllib import parseclass HonorOfKings: '''
This is a main Class, the file contains all documents.
One document contains paragraphs that have several sentences It loads the original
file and converts the original file to new content Then the new content will be
saved by this class ''' def __init__(self, save_path='./heros'):
self.save_path = save_path
self.time = str(time.time).split('.')
self.url = 'https://apps.game.qq.com/cgi-bin/ams/module/ishow/V1.0/query/workList_inc.cgi?activityId=2735&sVerifyCode=ABCD&sDataType=JSON&iListNum=20&totalpage=0&
page={}&iOrder=0&iSortNumClose=1&iAMSActivityId=51991&_everyRead=true&iTypeId=2&iFlowId=267733&iActId=2735&iModuleId=2735&_=%s' % self.time[0]
def hello(self): '''
This is a welcome speech :return: self '''
print("*" * 50)
print(' ' * 18 + '王者荣耀壁纸下载')
print(' ' * 5 + '作者: Felix Date: 2021-09-08 13:14')
print("*" * 50) return self def run(self): '''
The program entry '''
print('↓' * 20 + ' 格式选择: ' + '↓' * 20)
print('1.缩略图 2.1024x768 3.1280x720 4.1280x1024 5.1440x900 6.1920x1080 7.1920x1200 8.1920x1440')
size = input('请输入您想下载的格式序号,默认6:')
size = size if size and int(size)
in [1,2,3,4,5,6,7,8]
else 6 print('---下载开始...')
page = 0 offset = 0
total_response = self.request(self.url.format(page))
.text total_res = json.loads(total_response)
total_page = --int(total_res['iTotalPages'])
print('---总共 {} 页...' . format(total_page))
while True: if offset > total_page:
break url = self.url.format(offset)
response = self.request(url)
.text result = json.loads(response)
now = 0 for item in result["List"]:
now += 1
hero_name = parse.unquote(item['sProdName']).split('-')[0]
hero_name = re.sub(r'[【】:.<>|·@#$%^&() ]', '', hero_name)
print('--
-正在下载第 {}
页 {}
英雄 进度{}/{}...' .
format(offset, hero_name, now, len(result["List"])))
hero_url = parse.unquote(item['sProdImgNo_{}'.format(str(size))])
save_path = self.save_path + '/' + hero_name
save_name = save_path + '/' + hero_url.split('/')[-2]
if not os.path.exists(save_path):
os.makedirs(save_path)
if not os.path.exists(save_name):
with open(save_name, 'wb')
as f: response_content = self.request(hero_url.replace("/200", "/0")).
content f.write(response_content)
offset += 1
print('---下载完成...')
@retry(stop_max_attempt_number=3)
def request(self, url): '''
Send a request :param url:
the url of request :param timeout:
the time of request :
return: the result of request '''
response = requests.get(url, timeout=10)
assert response.status_code == 200
return responseif __name__ == "__main__":
HonorOfKings.hello.run

②、详细分析链接

  • 其实前端发送的是jsonp请求,这样的数据在python不好处理,因为不是标准的json格式
  • 因为其前面JQuery1710418919222这个字符串,而知道jsonp的请求的都知道,有这个前缀,必然请求链接中有相同的callback参数,将其删除即可
  • 因此我python代码中是删除了这个参数的
  • 这个链接还有很多参数,其实我觉得很多都可以删除,但是我懒得慢慢去试
  • 这个请求链接中最重要的一个参数必然就是页码数,也就是page这个参数,iListNum=20&totalpage=0&page={}
  • 上面的三个参数是可用的,一个是20,指每页的数量,totalpage估计没啥用,page抓包发现是从0开始的,这个需要注意一下,因为下面代码需要将总页数减1
self.url = 'https://apps.game.qq.com/cgi-bin/ams/module/ishow/V1.0/query/workList_inc.cgi?activityId=2735&sVerifyCode=ABCD&sDataType=JSON&iListNum=20&totalpage=0&page={}&iOrder=0&iSortNumClose=1&iAMSActivityId=51991&_everyRead=true&iTypeId=2&iFlowId=267733&iActId=2735&iModuleId=2735&_=%s' % self.time[0]

③、格式选择

  • 开始运行时,让你选择想下载格式的序号,为什么是8个格式呢,看原网页就知道了,8种不同分辨率的
  • 看上面的图片,缩略图链接有1-8,对应了8中分辨率的缩略图,那么原图必然也是8种
  • 这里我默认1920*1080的,一般电脑用这个分辨率的都可以
  • 其中1的原图,你自己试下,其实也是一个缩略图,所以一般下载选择2-8
print('↓' * 20 + ' 格式选择: ' + '↓' * 20)
print('1.缩略图 2.1024x768 3.1280x720 4.1280x1024 5.1440x900 6.1920x1080 7.1920x1200 8.1920x1440')
size = input('请输入您想下载的格式序号,默认6:')
size = size
if size and int(size)
in [1,2,3,4,5,6,7,8]
else 6

④、下载代码分析

  • 第一次请求主要是为了获取总页数,但是请求是从0开始为第一页,所以需要减去1
  • while true中就是开始从0循环去请求地址,先找到缩略图地址,然后将缩略图的地址链接200替换成0就是目标图片地址了
  • 如果名字中有特殊字符,就将其用正则去除,不然可能会影响路径的查找
print('---下载开始...')
page = 0offset = 0total_response = self.request(self.url.format(page))
.texttotal_res = json.loads(total_response)
total_page = --int(total_res['iTotalPages'])
print('---总共 {} 页...' .
format(total_page)
)while True:
if offset > total_page:
break url = self.url.format(offset)
response = self.request(url).text result = json.loads(response)
now = 0 for item in result["List"]:
now += 1 hero_name = parse.unquote(item['sProdName']).split('-')[0]
hero_name = re.sub(r'[【】:.<>|·@#$%^&() ]', '', hero_name)
print('---正在下载第 {} 页 {} 英雄 进度{}/{}...' .
format(offset, hero_name, now, len(result["List"])))
hero_url = parse.unquote(item['sProdImgNo_{}'.format(str(size))])
save_path = self.save_path + '/' + hero_name save_name = save_path + '/' + hero_url.split('/')[-2]
if not os.path.exists(save_path):
os.makedirs(save_path)
if not os.path.exists(save_name):
with open(save_name, 'wb')
as f: response_content = self.request
(hero_url.replace("/200", "/0")).content f.write(response_content)
offset += 1
print('---下载完成...')

⑤、爬虫运行的结果,相同名字的放在同一个文件夹下

-END-
资料视频教程领取方式:1、点赞+评论(勾选“同时转发”)2、关注小编。并私信回复关键字【资料】
(一定要私信哦~点击我的头像就能看到私信按钮了)
资料视频教程领取方式:1、点赞+评论(勾选“同时转发”)2、关注小编。并私信回复关键字【资料】
(一定要私信哦~点击我的头像就能看到私信按钮了)

Python爬取王者荣耀全套皮肤相关推荐

  1. 教你用python爬取王者荣耀英雄皮肤图片,并将图片保存在各自英雄的文件夹中。(附源码)

    教你用python爬取王者荣耀英雄皮肤图片,并将图片保存在各自英雄的文件夹中.(附源码) 代码展示: 保存在各自的文件夹中 美么? 让我们开始爬虫之路 开发环境 windows 10 python3. ...

  2. Python爬取 | 王者荣耀英雄皮肤海报

    这里只展示代码,具体介绍请点击下方链接. Python爬取 | 王者荣耀英雄皮肤海报 import requests import re import os import time import wi ...

  3. python爬取王者荣耀全皮肤,漫客的福利!

    先明确思路: 寻找皮肤图片地址 1 找到英雄列表 2 找到英雄皮肤地址 下载图片 1 英雄有几个皮肤 2 下载文件 进入正题:如何爬取王者荣耀的英雄皮肤照片? 分为两步: 找到皮肤图片的地址 下载图片 ...

  4. Python爬虫教程:爬取王者荣耀全套皮肤【附源码】

    怎么获取全套皮肤?用钱买,或者用爬虫爬取下来~虽然后者不能穿.这个案例稍微复杂一点,但是一个非常值得学习的项目. 具体实现思路: 分析网页源代码结构 找到合适的入口 穷举访问并解析 爬取所有英雄所有皮 ...

  5. python玩王者荣耀皮肤碎片怎么获得_大神教你用Python爬取王者荣耀英雄皮肤,不充钱也能入手!...

    前言 临下班前,看到群里有人在讨论用王者农药的一些皮肤作为电脑的壁纸,什么高清的,什么像素稍低的,网上查了一手,也有,但像素都不一样,所以,我就想着,自己去官网直接爬他的高清皮肤就好了,然后就有了这边 ...

  6. 利用Python爬取王者荣耀英雄皮肤!

    image 0.引言 作为一款现象级游戏,王者荣耀,想必大家都玩过或听过,游戏里中各式各样的英雄,每款皮肤都非常精美,用做电脑壁纸再合适不过了.本篇就来教大家如何使用Python来爬取这些精美的英雄皮 ...

  7. Python爬取王者荣耀全英雄皮肤(仅仅只是为了看皮肤)

    这两天才开始学习Python基础,听别人说可以利用Pythong爬取王者皮肤,出于好奇,在csdn搜索了一番,发现很多详细介绍,注释的非常清楚,简单易懂易操作,非常适合用来学习,这里转载一份亲测有用的 ...

  8. Python 爬取王者农药全套皮肤

    作者:toofelix 来源:http://suo.im/6pj3Zp 一.分析需要爬取的网站 ①.打开官方王者荣耀壁纸网站 网站地址:https://pvp.qq.com/web201605/wal ...

  9. python爬取王者皮肤别人可以看见效果吗_利用python爬取王者荣耀英雄皮肤图片

    前两天看到同学用python爬下来LOL的皮肤图片,感觉挺有趣的,我也想试试,于是决定来爬一爬王者荣耀的英雄和皮肤图片. 然后,简单的分析一下结构,看看是否有反爬机制. 之后,在上网查阅资料后,发现所 ...

最新文章

  1. B站讲演 | 我为什么要做科普视频?
  2. Adaboost原理与推导
  3. Saiku的下载与安装(一)
  4. openvas进程间通讯api与报文交互
  5. 离散事件模拟-银行管理
  6. MySql远程连接设置
  7. SAP UI5 初学者教程之十一 :SAP UI5 容器类控件 Page 和 Panel 试读版
  8. 作者:杨慰民(1970-),男,博士,中国移动通信集团福建有限公司网管中心副总经理...
  9. BZOJ3495 PA2010 Riddle 【2-sat】
  10. 常用的邮箱服务器配置
  11. 更改计算机时间出现没有权限,win7系统修改时间时显示没有权限的解决方法
  12. 优动漫PAINT安装教程
  13. python背单词小程序_微信小程序仿《乐词》背单词APP源码
  14. Excel 入门基础
  15. 3、HeidiSQL数据库管理工具下载与安装
  16. 关于微信小程序的基本介绍以及下载注意
  17. 用 Go 手写一个 JSON 序列化器
  18. 五笔中三个字的词组打法
  19. tplink怎么进去_如何进入tp-link路由器设置页面
  20. 丢手帕问题 java_java基于双向环形链表解决丢手帕问题的方法示例

热门文章

  1. java new数组_Java创建数组的几种方式
  2. 高德地图android 测试,平行路检测-专业导航-开发指南-Android 导航SDK | 高德地图API...
  3. matlab分数怎么表示,matlab如何将分数和人名写入excel的某一列中
  4. python实现网页自动健康打卡以及腾讯文档打卡
  5. 谷歌Chrome播放RTSP监控视频流,支持VUE、抓图、录像、回放、倍速等
  6. LG V40 ThinQ大量点!三主镜头与16倍变焦
  7. 欧洲文艺复兴时期,中国在干啥?
  8. 企业微信内嵌H5,引入 JS-SDK 调用 wx.previewFile 预览/下载文件(vue2.0适用)
  9. 抖音封禁3973个恶意炫富账号
  10. 微信小程序编写物流信息进度样式