【Python爬虫历程】urllib库之urlretrieve函数详解

urlretrieve函数：

urlretrieve() 方法直接将远程数据下载到本地。

这个函数可以方便的将网页上的一个文件保存到本地。文件类型可以是网页的html文件、图片、视频等媒体文件。

函数原型：urlretrieve(url, filename=None, reporthook=None, data=None)

• 参数 url 指定了要下载的文件的url
• 参数 finename 指定了保存本地路径（如果参数未指定，urllib会生成一个临时文件保存数据。）
• 参数 reporthook 是一个回调函数，当连接上服务器、以及相应的数据块传输完毕时会触发该回调，我们可以利用这个回调函数来显示当前的下载进度。
• 参数 data 指 post 到服务器的数据，该方法返回一个包含两个元素的(filename, headers)元组，filename 表示保存到本地的路径，header 表示服务器的响应头。

 

代码示例1：网站html文件下载

from urllib import request

request.urlretrieve("https://blog.csdn.net/qq_27524749",'csdn.html')

前面参数是url，后面是保存的路径以及文件名

 

 代码运行前后的截图

打开保存的html文件

 

 

代码例2：下载图片

from urllib import request

# request.urlretrieve("https://blog.csdn.net/qq_27524749",'csdn.html')
request.urlretrieve("https://timgsa.baidu.com/timg?image&quality=80&size=b9999_10000&sec=1585228126641&di=4bc1a5723b981b6834cf113d85b70eee&imgtype=0&src=http%3A%2F%2Fn.sinaimg.cn%2Fsinacn23%2F192%2Fw640h352%2F20180731%2F4d73-hhacrce5466100.jpg",'jjlin.jpg')

前面参数是图片地址，后面参数是保存的路径以及文件名

下载的图片