AnjukeSpider
https://git.oschina.net/xtlyk/AnjukeSpider
简介
爬去安居客房源,筛选房源,微信提醒
环境搭建
-
安装python2.7、pip、setuptools
-
安装requests
pip2.7 install request
使用
安居客相关
-
访问安居客网站,选择城市和小区后,复制当前网址,替换AnjukeUrl后面的网址
-
SizeRange为面积区间,既筛选面积<SizeRange的房源
-
PriceRange为总价区间,既筛选总价<=PriceRange的房源
-
UnitPriceRange为单间区间,既筛选单价<=UnitPriceRange的房源
-
NumEnd为页码区间1-NumEnd
-
SizeRange、PriceRange、UnitPriceRange、NumEnd值必须为数字
微信企业号相关
-
点击创建微信企业号,并获取CorpID与Secret
-
在通讯录中创建标签,并记录标签ID,添加到Totag
-
创建app,并记录应用ID,添加到AgentID*
未完善
-
未对接redis,因此循环执行脚本时,房源会重复提醒
-
未使用代理模式,因此ip存在被封的可能,因此每次获取房源后会sleep 3秒