拒绝黄牛党，掌握一手资讯，爬虫都能搞定，黄牛党一手

本片文章没有代码干货，仅提供一个思路让大家明白Python爬虫在生活中的应用，后续持续更新Python源码干货，欢迎大家讨论交流。

说Python是最容易入门，学得最快的编程语言，应该没人反对吧？Python可以用于网站后端的开发，数据分析师需要它，游戏开发者也用到它，主要的是Python爬虫可以获取或处理大量信息。

 

学习Python中有不明白推荐加入交流裙
                号：735934841
                群里有志同道合的小伙伴，互帮互助，
                群里有免费的视频学习教程和PDF！

网络爬虫的流程是这样的：模拟浏览器发送请求（获取网页代码）->提取有用的数据->存放于数据库或文件中。

 

近日，浅黑科技的作者的一位黑客朋友御风给他发了一份《中国爬虫图鉴》，根据这位作者称他的朋友是在腾讯云鼎实验室工作，和同事一起研究黑科技，搞了一个威胁情报系统，号称能探测到全世界的“爬虫”都在做什么。

然后在这份图鉴中，该作者就发现了一件令人毛骨悚然的事：在我们身处的网络世界，处处都爬满了各种网络爬虫，它们各有目的，但是只要是越接近利益的地方，就越是爬满了爬虫！最常见的就是我们每天都会使用到的各类APP！

 

这是一张世界上被爬虫经常关注的各行各业的比例分布情况，出行行业是在各类别中占比最高的，达到20.87%。

在出行的爬虫中，亚洲航空受爬虫青睐的程度绝对不低，亚航经常会放出便宜的机票，于是技术宅黄牛党们利用爬虫牟利，在脚本中写好了精确的时间，毫秒不差，能够准确的把票拍下了，等到有人需要了，马上利用程序，弃票，再马上帮你预定，然后，交易完成！

 

这只是出行APP中的一个例子，在其他类别的APP中，还有更骚的操作，除了各类APP，生活中的探索精神十足的网友也初试了网络爬虫的美妙。

网友一：

之前在北京买房，谁想房价开始疯长，链家的房价等数据分析只给了一小部分，远远不能满足自己的需求。于是晚上花了几个小时的时间写了个爬虫，爬下了北京所有的小区信息及北京所有小区的所有历史成交记录。

网友二：

上次发现Android QQ和iOS QQ可以显示网络状态（2G/WiFi)之后，突然想到，这样子好像可以监视某人的出行和作息规律。如果监测频率足够频繁，那么结合一定的推理，可以大致推测出一个人的行动。如果长期监视，那么可以大致推出一个人的作息时间。

网友三：

我只用Python爬虫写过一个驾校约车的脚本，让当时的我不惧上万的学车同僚，在约车环节没有输在起跑线上。

 

看吧，利用Python爬虫可以先人一步看到房源记录，可以推算一个人的作息（但可以说这已经是视监了），也可以插队约车。

当然，网络爬虫也不全是不好的，比如谷歌那样的搜索引擎爬虫，为大家提供查阅信息，各个网站都乐意被扫，但是像上面提到的类似抢票软件以及各种不正常获取他人信息的爬虫，也是十分恶意了！

但是，技术本无罪，就看你怎么使用。