Python爬虫之BeautifulSoup和requests的使用

requests，Python HTTP 请求库，相当于 Android 的 Retrofit，它的功能包括 Keep-Alive 和连接池、Cookie 持久化、内容自动解压、HTTP 代理、SSL 认证、连接超时、Session 等很多特性，同时兼容 Python2 和 Python3。

 

第三方库的安装：

pip install urllib

pip install requests

 

 

小爬虫代码如下：

# -* - coding: UTF-8 -* -
#导入第三方库 
import urllib
from bs4 import BeautifulSoup
import requests
url='https://www.phb123.com/junshi/lishi/9679_2.html'
local="E:\\py\\imgs\\"    #保存图片的文件夹
html_doc=requests.get(url).text
soup=BeautifulSoup(html_doc,'lxml')   #解析 html_doc
contens=soup.find_all('center')
x=1
for con in contens:
    imgs=con.find_all('img') #获取center标签下的img标签
    for img in imgs:
        urllib.request.urlretrieve(img['src'], local + '%s.jpg' % (x))
        x =x+1

标签：

版权申明：本站文章部分自网络，如有侵权，请联系：west999com@outlook.com
特别注意：本站所有转载文章言论不代表本站观点，本站所提供的摄影照片，插画，设计作品，如需使用，请与原作者联系，版权归原作者所有