用Python爬取了全国近5000家旅游景点,分析元旦去哪玩

Posted aa1273935919

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了用Python爬取了全国近5000家旅游景点,分析元旦去哪玩相关的知识,希望对你有一定的参考价值。

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理

以下文章来源于腾讯云 作者:Python编程与实战

( 想要学习Python?Python学习交流群:1039649593,满足你的需求,资料都已经上传群文件流,可以自行下载!还有海量最新2020python学习资料。 )
技术图片

我用 Python 爬取了全国近 5000 个旅游景点,并结合 pyecharts 来做分析

技能包

  • 爬虫
  • Mysql
  • sqlalchemy
  • pyecharts

数据爬取

旅游景点的数据是从网上爬取的,该数据包含以下维度:景点名称,所属省市区,景点简介,门票价格,评分,近期销量,景点评级等。

爬虫比较简单,多分析下就可以,直接贴代码了

技术图片
爬虫代码

基本上没什么反爬,加点延时别爬太快就是了…

爬取下来之后直接入库,入库部分代码如下:
技术图片
入库

当然,每个省份我只爬了前 10 页,因为后面的基本都是些不知名的旅游景点

爬完之后看了下数据库有 4572 条数据,我想应该够了吧…
技术图片
有了数据之后,是不是就能搞事情了…,简单做几个分析

数据分析

接下来我们使用 pyecharts 来对爬取的数据做一个简单的分析

1. 景点销量排行榜

直接从数据库查出数据,丢进去就行。
技术图片
结果展示:
技术图片

2. 景点评级排行榜

假期这么长,想玩的地方有很多!如何选择一个景点多的地方并且评级高的

这样就能在一个地方尽情的玩耍,而不用四处奔波

我们不妨来看看各省市能排的上号的景点有多少吧!

代码如下:
技术图片
将数据查询出来后作一个简单的清洗,统计各省份 4A 级以上景点数量

一起来看看吧

技术图片
再将这些数据放到地图上看看…更加直观
技术图片

3.各省销量排行榜

通过该数据,可以看出哪些省市区的人会比较多…
技术图片
这样就能避免去人山人海的地方看人人人人.。。
技术图片
综合分析
最终考虑去哪儿,可能需要多维度的分析。

所有,我把价格,评分,销量这三个维度放在一起

当然,你也可以选择你关心的维度来…最好自己动手试试

这样印象深刻!

技术图片
来看看效果把:
技术图片
重点关注下销量高,评分高,价格合适的…






















以上是关于用Python爬取了全国近5000家旅游景点,分析元旦去哪玩的主要内容,如果未能解决你的问题,请参考以下文章

月薪30k的资深程序员用Python爬取了知乎百万用户!并数据分析!

用Python爬取了考研吧1000条帖子,原来他们都在讨论这些!

我把全国旅游数据用Python爬下来后发现,这个地方才是真正的旅游胜地

告诉你那里最受欢迎,python爬取全国13个城市旅游数据

用Python爬取了2900多款防脱洗发水数据并进行可视化分析,助你缓解脱发困扰

Python爬取《流浪地球》豆瓣影评与数据分析