requests 扩展 | Requests-Cache(爬虫缓存)
为
requests模块
持久化缓存提供支持。在我们使用浏览器浏览网页时,经常会有大量的缓存,为你二次访问网站时更加快速地加载网页。同样地,当使用requests模块
向一个URL发送重复请求时,也需要判断当前网络是否产生了缓存。此时Requests-Cache模块
将会自动判断,若产生了缓存,则会读取数据作为响应内容。若没有缓存,则与第一次请求一样,获取服务器返回的响应内容。这样可以变相地躲避一些反爬机制。Loading...