深圳租房信息爬虫
2018-10-08 01:32:16来源：博客园 阅读 ()
考虑到以后可能会在深圳工作，所以写了这个爬虫，希望对自己的找房过程提供一些便捷。
信息来源是豆瓣的深圳租房小组（想爬取其他城市只需要更换一下URL就好）。
你们一定会说这么麻烦干什么，租房APP不是直接看么？我也是这么想的。。。但是租房APP上中介比较多，豆瓣上多是个人房源，中介少，比较可靠。但豆瓣APP没有筛选功能，只是相当于百度贴吧一样的浏览界面。
所以我提供了价格筛选功能，目前设定的是2000/月。
我把它按标题，帖子链接，正文的顺序保存在txt文件下，便于分享。
以下是效果图↓
因为有些帖子的正文没有内容，所以是空行
代码↓
因为headers比较长所以我省略了一部分，比较遗憾的是不会操作PDF文件，不然就可以把图片也写进去。（中间因为请求太频繁豆瓣还把我的账号锁定了0.0）
标签：
版权申明：本站文章部分自网络，如有侵权，请联系：west999com@outlook.com
特别注意：本站所有转载文章言论不代表本站观点，本站所提供的摄影照片，插画，设计作品，如需使用，请与原作者联系，版权归原作者所有
- 小白如何入门 Python 爬虫？ 2019-08-13
- python day2-爬虫实现github登录 2019-08-13
- 使用scrapy框架爬取全书网书籍信息。 2019-08-13
- python爬虫学习之爬取超清唯美壁纸 2019-08-13
- python爬虫学习之用Python抢火车票的简单小程序 2019-08-13
IDC资讯： 主机资讯 注册资讯 托管资讯 vps资讯 网站建设
网站运营： 建站经验 策划盈利 搜索优化 网站推广 免费资源
网络编程： Asp.Net编程 Asp编程 Php编程 Xml编程 Access Mssql Mysql 其它
服务器技术： Web服务器 Ftp服务器 Mail服务器 Dns服务器 安全防护
软件技巧： 其它软件 Word Excel Powerpoint Ghost Vista QQ空间 QQ FlashGet 迅雷
网页制作： FrontPages Dreamweaver Javascript css photoshop fireworks Flash
