python 爬取 国家统计局官网 的统计用区划和城乡划分代码 发现了惊天秘密!!!附python的详细源代码2
Posted
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python 爬取 国家统计局官网 的统计用区划和城乡划分代码 发现了惊天秘密!!!附python的详细源代码2相关的知识,希望对你有一定的参考价值。
1 在页面做5级级联菜单
需要将名称和代码进行简化,然后导出为js数据,再进行调取
UPDATE area SET ShortAreaCode =SUBSTR( AreaCode,1,(CASE WHEN Level<4 THEN Level*2 ELSE 3*2+(Level-3)*3 END))
UPDATE area SET ShortFatherAreaCode=SUBSTR(FatherAreaCode,1,(CASE WHEN Level<5 THEN (Level-1)*2 ELSE 3*2+(Level-1-3)*3 END))
生成了js数据文件了,发现太大了,有25m.
所以只能做成 从数据库读取的方式,太麻烦了 没做完
2 做了个中国邮政普通包裹费用查询器
已做完
源代码 https://github.com/simadi/Python-Areacode
以上是关于python 爬取 国家统计局官网 的统计用区划和城乡划分代码 发现了惊天秘密!!!附python的详细源代码2的主要内容,如果未能解决你的问题,请参考以下文章
用scrapy 爬虫框架读取统计局网站的行政区划(备忘记录)