Python爬虫9-----实例-抓取上海高级人民法院网开庭公告数据

Posted edeny

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python爬虫9-----实例-抓取上海高级人民法院网开庭公告数据相关的知识,希望对你有一定的参考价值。

通过前面的文章已经学习了基本的爬虫知识,通过这个例子进行一下练习,毕竟前面文章的知识点只是一个

一个单独的散知识点,需要通过实际的例子进行融合。

分析网站

其实爬虫最重要的是前面的分析网站,只有对要爬取的数据页面分析清楚,才能更方便后面爬取数据

目标站和目标数据
目标地址:http://www.hshfy.sh.cn/shfy/gweb/ktgg_search.jsp
目标数据:目标地址页面的中间的案开庭公告数据

对数据页面分析
从打开页面后可以看到默认的数据是一个月的数据,即当天到下个月该天的
通过翻页可以返现这个时候页面的url地址是不变的,所以这里我们大致就可以判断出,中间表格的数据是通过js动态加载的,我们可以通过分析抓包,找到真实的请求地址

 

以上是关于Python爬虫9-----实例-抓取上海高级人民法院网开庭公告数据的主要内容,如果未能解决你的问题,请参考以下文章

python之爬虫 实例爬取上海高级人民法院网开庭公告数据

python3爬虫

一起使用爬虫技术抓取数据构成犯罪的案件(裁判文书)

Python高级应用程序设计

Python高级应用程序设计

Python3 爬虫实例-- 简单网页抓取