如何用Python获取今日头条上面三千美女图,且看…
2018-08-06 09:14:41来源:博客园 阅读 ()
我们的学习爬虫的动力是什么?
有人可能会说:如果我学好了,我可以找一个高薪的工作。
有人可能会说:我学习编程希望能够为社会做贡献(手动滑稽)
有人可能会说:为了妹子!
.....
其实我们会发现妹子才是第一生产力呀!
今天咱们就是爬取今日头条,你要问我为什么要爬取今日头条?是因为爱嘛?
是因为责任嘛?
不,是因为头条里面的有很多美女图片,然后我们可以把她们都爬取下来!!!
是不是想想都觉得很兴奋,是不是都要流鼻血了?!
我们要做的就是把上面的图片给爬下来。
开始分析网站
按下f12,然后点击network,刷新下你可以看到这些
在网页上可以看到图片会随着你下拉网页而进行显示更多的图片。
今日头条的网站是动态加载的,其实可以很轻松的就可以在xhr的文件里面找到。
不断地发送请求,点击这个请求看看是返回什么数据
可以看到这是个json,里面有图片的url,这个就是我们要找的东西。
我们可以用json库来解析,还有这个网站是get请求,这样就可以用requests库来发送然后解析下就可以了,非常简单。
代码
最后给你们看下结果
上述文章如有错误欢迎在留言区指出,如果这篇文章对你有用,点个赞,转个发如何?
标签:
版权申明:本站文章部分自网络,如有侵权,请联系:west999com@outlook.com
特别注意:本站所有转载文章言论不代表本站观点,本站所提供的摄影照片,插画,设计作品,如需使用,请与原作者联系,版权归原作者所有
- python3基础之“术语表(2)” 2019-08-13
- python3 之 字符串编码小结(Unicode、utf-8、gbk、gb2312等 2019-08-13
- Python3安装impala 2019-08-13
- 小白如何入门 Python 爬虫? 2019-08-13
- python_字符串方法 2019-08-13
IDC资讯: 主机资讯 注册资讯 托管资讯 vps资讯 网站建设
网站运营: 建站经验 策划盈利 搜索优化 网站推广 免费资源
网络编程: Asp.Net编程 Asp编程 Php编程 Xml编程 Access Mssql Mysql 其它
服务器技术: Web服务器 Ftp服务器 Mail服务器 Dns服务器 安全防护
软件技巧: 其它软件 Word Excel Powerpoint Ghost Vista QQ空间 QQ FlashGet 迅雷
网页制作: FrontPages Dreamweaver Javascript css photoshop fireworks Flash