您现在的位置是:首页 > 文章详情

Scrapy 2.13.0 发布,Python 爬虫框架

日期:2025-05-09点击:47

Scrapy 是一套基于 Twisted 的异步处理框架,纯 Python 实现的爬虫框架,用户只需要定制开发几个模块就可以轻松的实现一个爬虫,用来抓取网页内容以及各种图片。它也可以用于广泛的目的,从数据挖掘、监控到自动测试等。

v2.13.0 更新内容如下:

  • asyncio reactor 现在默认启用
  • start() (async) 代替start_requests() (sync),并更改了迭代方式。
  • 添加了allow_offsiterequest meta key
  • 不支持异步 spider output 的 Spider 中间件已被弃用
  • 为通用 spider 中间件添加了一个基类

更多详情可查看完整的更新日志

原文链接:https://www.oschina.net/news/348911/scrapy-2-13-0-released
关注公众号

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。

持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。

文章评论

共有0条评论来说两句吧...

文章二维码

扫描即可查看该文章

点击排行

推荐阅读

最新文章