打开APP
userphoto
未登录

开通VIP,畅享免费电子书等14项超值服

开通VIP
Scrapy 1.5.0 发布!



1、在 FilesPipeline 和 ImagesPipeline 中增加了Google Cloud Storage 的支持。

2、使用代理服务器进行爬取变得更高效,因为到代理的链接现在可以重用了。

3、警告、异常和日志输出的内容进行了改善,使得debug更容易。

4、scrapy parse 命令现在允许设置自定义的请求头,通过--meta参数。

5、兼容Python3.6,PyPy和PyPy3的兼容性改善;现在官方支持了PyPy和PyPy3,已经通过了CI测试。

6、更好地处理HTTP状态码308、522、524。

7、文档改善。


更新详情地址


https://docs.scrapy.org/en/latest/news.html#scrapy-1-5-0-2017-12-29


课程跟进


Python部落(python.freelycode.com)的《一周学会写爬虫课程》会持续跟进更新的情况,陆续更新课程跟进Scrapy的版本更新,请各位学员耐心等待。


本站仅提供存储服务,所有内容均由用户发布,如发现有害或侵权内容,请点击举报
打开APP,阅读全文并永久保存 查看更多类似文章
猜你喜欢
类似文章
【热】打开小程序,算一算2024你的财运
比 Python 快得吓人,PyPy 极简入门
关于python Scrapy的安装
推荐|Python网络爬虫实战课程(入门到实战)
【墙裂推荐】慕课网最受欢迎的25门精选热课免费学!
Python网络爬虫与信息提取
提升Python开发者工作效率的六个库!
更多类似文章 >>
生活服务
热点新闻
分享 收藏 导长图 关注 下载文章
绑定账号成功
后续可登录账号畅享VIP特权!
如果VIP功能使用有故障,
可点击这里联系客服!

联系客服