|
|
利用requests.get()方法和response.content方法是否能够打印出图片
import requests
def download_image():
url = 'https://timgsa.baidu.com/timg?image&quality=80&size=b9999_10000&sec=1504068152047&di=8b53bf6b8e5deb64c8ac726e260091aa&imgtype=0&src=http%3A%2F%2Fpic.baike.soso.com%2Fp%2F20140415%2Fbki-20140415104220-671149140.jpg'
response = requests.get(url)
print(response.status_code)
print(response.content)
if __name__ == '__main__':
download_image()
运行一下，发现请求正确，但是用response.content打印出来是一堆乱码。
200
b'\xff\xd8\xff\xe0\x00\x10JFIF\x00\x01\x01\x01\x00H\x00H\x00\x00\xff\xd....后面跟着很多类似的乱码一样的数据
现在问题来了，我们怎么样才能把图片下载到本地，用response.content方法是行不通的。我们知道，图片也是文件格式，图片也是一些二进制代码组成。我们把图片当做普通的文件，然后通过字节流的方法，把图片保存到本地。
4.通过字节流方式保存图片
大概的原理是，一个图片是由字节流数据组成，我们可以把图片分层多个字节流数据，加载到内存，然后复制字节流到一个本地路径，最后组合成一张图片。
import requests
def download_image():
url = 'https://timgsa.baidu.com/timg?image&quality=80&size=b9999_10000&sec=1504068152047&di=8b53bf6b8e5deb64c8ac726e260091aa&imgtype=0&src=http%3A%2F%2Fpic.baike.soso.com%2Fp%2F20140415%2Fbki-20140415104220-671149140.jpg'
response = requests.get(url, stream = True)
# 这里打开一个空的png文件，相当于创建一个空的txt文件,wb表示写文件
with open('selenium.png', 'wb') as file:
# 每128个流遍历一次
for data in response.iter_content(128):
# 把流写入到文件，这个文件最后写入完成就是，selenium.png
file.write(data) # data相当于一块一块数据写入到我们的图片文件中
print(response.status_code)
if __name__ == '__main__':
download_image()
运行之后，得到请求状态码是200，而且会在当前这个脚本文件同级目录下生成一个selenium.png的图片。如果你要指定图片保存路径，你可以在open('图片完整路径','wb')，通过这样方式，把图片保存到你想要保存的磁盘路径。上面虽然实现了我们的下载图片的目的，但是有一个问题就是，我们使用完了stream之后，没有立马去关闭，这样会造成内存资源紧张，如果是批量下载很多图片，这个方式是不可取的。
5.换一种方式，及时关闭stream
import requests
from contextlib import closing
def download_image_improve():
url = 'https://timgsa.baidu.com/timg?image&quality=80&size=b9999_10000&sec=1504068152047&di=8b53bf6b8e5deb64c8ac726e260091aa&imgtype=0&src=http%3A%2F%2Fpic.baike.soso.com%2Fp%2F20140415%2Fbki-20140415104220-671149140.jpg'
response = requests.get(url, stream = True)
with closing(requests.get(url, stream = True)) as response:
# 这里打开一个空的png文件，相当于创建一个空的txt文件,wb表示写文件
with open('selenium1.png', 'wb') as file:
# 每128个流遍历一次
for data in response.iter_content(128):
# 把流写入到文件，这个文件最后写入完成就是，selenium.png
file.write(data)
if __name__ == '__main__':
download_image_improve()
运行之后，也会在当前脚本文件所在目录生成一个selenium1.png文件。contextlib.closing()函数是实现在一个代码块之后自动关闭，这里的代码块，就是我们请求下载图片的过程。这篇，已经实现了限定的图片url下载，如果是爬虫，肯定是大量图片下载。上面图片下载可以提取出来，重构成一个方法，在实际爬虫中调用。当然，爬虫中，很多是变量，图片请求url是变量，图片名称和保存路径也是变量。这里不继续讨论，爬虫实现的过程了。
|
|
发表于 2019-5-14 09:18:45
