堆糖网爬虫(根据关键字下载图片)

一、分析过程

  1. 打开charles,访问堆糖网,输入关键字点击搜索,观察charles结果
    image
    发现这里传了两个参数,一个是kw关键字,和一个type
    下面我们拖动进度条,继续往下浏览,看接口会发生哪些变化

image
这个接口是新增的,请求的参数也包含了我们的关键字,而且多了一些不知道是什么的参数,但是看第二个参数是24
继续往下浏览

image
发现每触发一次接口这个值都会增加24

image
每触发一次接口返回24张图片,那我每次都给他加24就好了。

image
看返回的数据是json类型的,标出的就是图片的url地址,根据json取到,再存到本地就可以了。

这个站还是比较简单的,不需要登录,而且变化的值也就那么几个参数