其他
爬虫——马蜂窝游记
作者:zhaikun 风控建模屌丝一枚,现居于北京
个人微信公众号:Python数据分析与评分卡建模
学python不学爬虫,是很浪费的事情。爬虫在手,天下我有嘛,呵呵。
这里介绍怎么爬取马蜂窝游记,没有用到scrapy,没有用到分布式,没有用到验证码,就是一个简简单单的爬虫,对于入门最好不过了。
学爬虫,最重要的是要会观察网址规律。我们看看马蜂窝游记。
http://www.mafengwo.cn/mdd/,这是各城市展示。
http://www.mafengwo.cn/yj/10065/,这是各城市下的游记。
10065就是城市代码。
下面开始上代码:
看代码运行结果:
ok,成功下载
Python爱好者社区历史文章大合集:
Python爱好者社区历史文章列表(每周append更新一次)
关注后在公众号内回复“课程”即可获取:
小编的Python入门视频课程!!!
崔老师爬虫实战案例免费学习视频。
丘老师数据科学入门指导免费学习视频。
陈老师数据分析报告制作免费学习视频。
玩转大数据分析!Spark2.X+Python 精华实战课程免费学习视频。
丘老师Python网络爬虫实战免费学习视频。