Python爬虫:获取去哪儿网目的地下的景点数据
文章目录
-
- 1. 前言
- 2. 网页解构分析
- 3. 代码实现
- 4. Java 新建 SpringBoot项目实现上述网页效果
1. 前言
本篇文章讲述如何使用Python爬虫爬取去哪儿目的地下的景点数据，会提供一些参考代码，需要完整的，可以私信，但是参考代码仅供学习使用喔，不能用于商业活动！读者切记。
用这个网页链接举例，链接为：https://travel.qunar.com/p-cs299782-xiamen-jingdian。
2. 网页解构分析
要爬取页面数据，首先需要做的是分析这个数据是当前页面上的，还是通过一些技术动态生成的(如ajax)，只有了解了这个，才能更好的把数据爬取下来，避免做一些无用功来浪费时间。这个景点数据是当前页面上，所以我们只需要使用requests模块请求这个页面即可。需要爬取的数据有景点名称、景点的图片、景点英文名、景点在当前目的地下的排名、景点描述以及景点的经纬度。