安居客二手房爬虫-微信提醒合适房源!

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了安居客二手房爬虫-微信提醒合适房源!相关的知识,希望对你有一定的参考价值。

AnjukeSpider

项目地址 https://github.com/X-Mars/AnjukeSpider/

简介

爬去安居客房源,筛选房源,微信提醒

环境搭建

  1. 安装python2.7pipsetuptools

  2. 安装requests

pip2.7 install request

使用

安居客相关

  1. 访问安居客网站,选择城市和小区后,复制当前网址,替换AnjukeUrl后面的网址

  2. SizeRange为面积区间,既筛选面积<SizeRange的房源

  3. PriceRange为总价区间,既筛选总价<=PriceRange的房源

  4. UnitPriceRange为单间区间,既筛选单价<=UnitPriceRange的房源

  5. NumEnd为页码区间1-NumEnd

  6. SizeRangePriceRangeUnitPriceRangeNumEnd值必须为数字

微信企业号相关

  1. 点击创建微信企业号,并获取CorpIDSecret

  2. 在通讯录中创建标签,并记录标签ID,添加到Totag

  3. 创建app,并记录应用ID,添加到AgentID*

未完善

  1. 未对接redis,因此循环执行脚本时,房源会重复提醒

  2. 未使用代理模式,因此ip存在被封的可能,因此每次获取房源后会sleep 3秒

本文出自 “linux相关分享” 博客,请务必保留此出处http://2860664.blog.51cto.com/2850664/1883782

以上是关于安居客二手房爬虫-微信提醒合适房源!的主要内容,如果未能解决你的问题,请参考以下文章

Python开发爬虫之BeautifulSoup解析网页篇:爬取安居客网站上北京二手房数据

python3 爬虫之爬取安居客二手房资讯(多线程版)

基于Redis的分布式链家二手房房源数据爬虫系统 毕业设计

scrapy实例:爬取安居客租房信息

21天打造分布式爬虫-房天下全国658城市房源

21天打造分布式爬虫-房天下全国658城市房源