迟到的爬虫!!!

童年,是一幅迷人的画

听说懂得欣赏技术的人都已经关注了我们,你还在等什么?

先input一个题外话,最近快到期末,老师布置了作业项目,加上快要儿童节了,最最最激动的是618的预热。咳咳、、所以,时间比较仓促,但百忙之中还是把文章写出来了,原谅我的懒惰!!!如果有什么不对的地方,还请大家指正!!!

大家都知道,啊呸,可能有人知道,在微信里面有个小程序,叫做抽奖助手(免费打了一波小广告是不是得让我中一次啊,

F**k!)。我经常进去抽奖,虽然一次都没有抽到过,但是,我毕竟也没发过奖啊

。。。等公众号稍微做得有点起色之后再尝试发起抽奖吧。。。

很显然,在抽奖助手中的公共抽奖,参与抽奖是免费的,但是需要花时间,想抽奖就不得不每天打开小程序逐个点击参与才能参与(我自己也经常忘记

),每天重复的操作觉得好繁琐,于是在某一天看到@刘志军写的文章后,发现可以用爬虫去参与抽奖,但是感觉不是圈子里的人是看不懂的

。所以,参考了@刘志军大大的文章的基本思路,加上我自己的理解,然后用比较容易理解的口吻和方式,重新写了这样一篇文章,来实现用爬虫去自动参与抽奖。

准备事项

  1. 别的基本的废话(什么准备手机和电脑之类的)就不多说了,首先,你得现在电脑上安装Python(推荐用python3.6.5的版本,请自行去社区下载安装),特别注意要勾上Add Python 3.6 to PATH这个选项哟!
  2. 在你的电脑上安装Fiddler,并学会使用,由于篇幅有限,并且不偏离主题,这里不教大家使用,只是简单介绍跟我们这次相关的知识,其他的请自行爬楼!!!
  3. 用 Python 来构建一个自动参与抽奖的脚本。
  4. 大致思路就是这样子了,差不多了。。。

我也是菜鸟,别对我要求太多

Fiddler的工作原理

如何下载安装就不多废话了,如果你连这个都不会,那么你就是连门都没入,下面的内容也没必要看了,这个和安装游戏也没啥多大的区别!

什么是Fiddler?

Fiddler是一个web调试代理。它能够记录所有客户端和服务器间的http请求,允许你监视,设置断点,甚至修改输入输出数据,fiddler包含了一个强大的基于事件脚本的子系统,并且能够使用.net框架语言扩展。

原理?

Fiddler 作为系统代理,当启用Fiddler 时,IE 的PROXY 设定会变成一个相对的数值,比如(127.0.0.1:8888)。所有的来自互联网服务的HTTP 请求在到达目标Web 服务器之前都会经过Fiddler,同样的,所有的HTTP 响应都会在返回客户端浏览器之前经过Fiddler。

看上图,你就明白原理了,它以8888端口开本地代理服务器,并且支持https!另外,除了他具有一般web调试器的所有功能之外,其最最大的一个特点是可以中途修改http通信内容来达到调试的功能。

操作

在实际操作中,手机和电脑要在同一个局域网络中!打开Fiddler软件,界面和其他抓包软件一样,全英文

再次确保安装Fiddler的电脑和你的手机在同一局域网内,因为Fiddler只是一个代理,需要将手机的代理指向PC机,不能互相访问是不行的。

先ping出自己的电脑的IP地址,打开控制台,输入ipconfig即可!

然后打开Fiddler,选择Tools>Options>Connections,勾选Allow remote computers to connect这个选项,然后确定。弄完之后一点要重启Fiddler软件!!!

然后在手机端配置即可!代理选择手动,主机名就是电脑的IP地址。具体的都视情况而定。

然后就可以抓包了,先随便抓一个看看,可以看到现在抓取的地址包:

通过 Fiddler 抓包,我们看到抽奖列表的请求地址是:/public_lottery?page=1&size=5, 请求方法是 GET,还有一个 Header 字段 Authorization,返回的数据结构可以清晰看到总共返回了5条数据,代表5个奖品,每个字段基本能猜出来什么意思。

(这张图片来源于@刘志军)

看背后它是怎么向服务器发送请求的,弄清楚了原理之后就可以用程序来自动模拟请求。

用Python来实现

现在我们就可以用 Python 来构建一个自动参与抽奖的脚本,每隔一段时间就去自动刷,发现有新的奖品,就自动参与抽奖啦。(代码感谢@刘志军大佬写出来,鼓掌

源代码

# coding=utf-8    import requests    def main():      url = "https://lucky.nocode.com/public_lottery?page=1&size=5"      # 替换成你自己的Authorization      headers = {          "Authorization": "Bearer eyJhbGciOiJIUzI1NiIsInR5cCI6IkpXV...."}      res = requests.get(url, headers=headers)      lotteries = res.json().get("data")      join_url = "https://lucky.nocode.com/lottery/{id}/join"      for lottery in lotteries:          res = requests.post(join_url.format(id=lottery.get("id")), headers=headers)          data = res.json()          if res.status_code == 200 and 'errors' not in data:              print("成功参与抽奖:《%s》" % lottery.get("prizes").get("data")[0].get("name"))    if __name__ == '__main__':      main()

(代码可以左右滑动查看)

成功参与抽奖:《阿玛尼红管唇釉》  成功参与抽奖:《Havaianas 人字拖》  成功参与抽奖:《《不要成为无聊的大人》》  成功参与抽奖:《Satan 钥匙扣》  成功参与抽奖:《桌面理线器》

运行后你就会发现,抽奖活动全部变成已参与了!

最后,祝大家:

6.1

儿童节快乐

下面是@刘志军大佬的原话:有人可能会问,这算不算作弊呢?我觉得这就是程序员的优势,我们只是用了不一样的工具来完成相同的事情,以后编程还真的是每个人都应该掌握的一项基本技能,没事写个代码解决繁琐的、重复的工作。懒惰是推动社会文明进步的原动力。

下次再见

想学Java&python|其它计算机语言的你,是否有过迷茫呢?没关系,私信龙先森,让龙先森对你一对一解答!

『好了,本期就说到这,一期一篇,有精华有干货,有时也划水,还希望大家多多支持。如果你喜欢龙先森的文章,不妨点击下关注,并分享至朋友圈!』


*版权声明:版权归作者本人所有,尊重原创,推送文章除非无法确认,都会注明作者和来源。如果出处有误或侵犯到原作者权益,实属无心之举,请务必与我联系删除或授权事宜。