分析了 7 万款 App 后，居然全是我没想到的...

本文分享自公众号【第2大脑】，作者苏克1900，经授权分享给大家。全文近1.3万字，预计阅读时间：33分钟，建议点赞收藏后找空余时间阅读。摘要：使用 Scrapy 爬取豌豆荚全网 70,000+ App，并进行探索性分析。写在前面：若对数据抓取部分不感兴趣，可以直接下拉到数据分析部分。1 分析背景之前我们使用了 Scrapy 爬取并分析了酷安网 6000+ App，为什么这篇文章又在讲抓 App 呢？因为我喜欢折腾 App，哈哈。当然，主要是因为下面这几点：第一、之前抓取的网页很简单在抓取酷安网时，我们使用 for 循环，遍历了几百页就完成了所有内容的抓取，非常简单，但现实往往不会这么 easy，有时我们要抓的内容会比较庞大，比如抓取整个网站的数据，为了增强爬虫技能，所以本文选 ………………………………