看啥推荐读物
专栏名称: InfoTech
以传播大数据、解读行业趋势、数据化运营为核心的新媒体平台,已有150多万行业人士关注,荣获2013年新浪微博百强自媒体、2016年中国十大大数据领域影响力平台,关注我就是关注数据
今天看啥  ›  专栏  ›  InfoTech

Python实战 | 只需 ”三步“ 爬取二手iphone信息(转发送源码)

InfoTech  · 公众号  · 大数据  · 2018-07-28 00:00
又是一个周六,祝大家一天好心情!本次实战是爬取二手苹果手机的信息,共爬取了300部手机信息,效果如下: 开发环境环境:MAC + Python3.6IDE:Pycharm模块:import requests、from bs4 import BeautifulSoup爬取目标本次爬取目标是58同城二手iphone手机信息,如下图所示。这些信息主要包括标题,价钱,区域,信息所属分类。爬取分析本次需要爬取300个二手手机信息,但是58网站的每一页信息只有30套,如下。因此我们需要爬取10个网页的信息,也就是爬取多个页面。通过观察,我们发现第二个网址是http://bj.58.com/iphonesj/pn2/,第三个是http://bj.58.com/iphonesj/pn1/,因此得出网址的规律是pn的页面以此加1。根据上面的分析,我们只需使用一个for循环就可以得到10个页面的信息,具体代码如下:` ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照