Scrapy 2.7.0 发布,Python 爬虫框架
Scrapy 是一套纯 Python 实现的爬虫框架,用户只需要定制开发几个模块就可以轻松的实现一个爬虫,用来抓取网页内容以及各种图片。它也可以用于广泛的目的,从数据挖掘、监控到自动测试等。
v2.7.0 更新内容如下
- 添加了 Python 3.11 支持,删除了 Python 3.6 支持
- 改进了对异步回调的支持
- 新项目默认启用Asyncio 支持
- 项目字段的输出名称现在可以是任意字符串
- 现在可以进行集中式请求指纹配置
一些依赖项的最低要求版本也发生了变化:
- lxml: 3.5.0 → 4.3.0
- Pillow (images pipeline): 4.0.0 → 7.1.0
- zope.interface: 5.0.0 → 5.1.0
完整更新公告:https://docs.scrapy.org/en/latest/news.html#scrapy-2-7-0-2022-10-17

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
Taro 3.5.7 发布,BAT 小程序、H5 与 RN 端统一框架
Taro 3.5.7 现已发布。Taro 是一个开放式跨端跨框架解决方案,支持使用 React/Vue/Nerv 等框架来开发微信 / 京东 / 百度 / 支付宝 / 字节跳动 / QQ 小程序 / H5 等应用。 此版本具体更新内容如下: 特性 H5 新增兼容 getLaunchOptionsSync、getEnterOptionsSync API 新增监听各 API、组件不支持状态抛出事件 修复 小程序 Promise 化字节小程序的 getUserProfile API,#12612 支持支付宝小程序的 Camera 组件,#12442 修复 App 没有触发首次 componentDidShow 系列生命周期的问题,#12634 修复自动为数字类型的 CSS 变量与部分属性(如: animation-iteration-count)自动添加 px 后缀的问题,#12617 修复 PReact 压缩后属性设置不生效的问题,#12589 微信小程序反向转换功能兼容以 kebab-case 命名的 triggerEvent 事件名 修复预渲染报错的问题,#12622 支持 PayBu...
- 下一篇
CBL-Mariner 10 月更新,微软开源的 Linux 发行版
CBL-Mariner(CBL 即 Common Base Linux)是微软内部使用的 Linux 发行版,它不是桌面 Linux 而是服务器端 Linux,它被用于微软的云基础设施以及边缘产品和服务。CBL-Mariner 旨在为这些设备和服务提供一致的平台,并增强微软在 Linux 更新方面与时俱进的能力。 CBL-Mariner 2.0 版本 2022 年 10 月更新内容包括: 新增 增加了生成 livepatch 包的自动化 添加 csi-driver-lvm。 添加 git-lfs 并将 rubygem-ronn 依赖项移至 SPECS 添加对 finalizeImage 的初始支持 为 unzip 添加大文件支持 增加为特定架构建立软件包的选项 在 Mariner 中添加 python-absl-py 包 为 Mariner 中添加 python-astunparse 包 增加对 blobfuse2 的支持 在 Mariner 分区解析器中增加 UEFI 支持 修复 修复内核 CVE-2022-3303 修复 moby-engine CVE-2022-24769 修复 ...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS7设置SWAP分区,小内存服务器的救世主
- CentOS7,CentOS8安装Elasticsearch6.8.6
- CentOS8安装Docker,最新的服务器搭配容器使用
- CentOS8安装MyCat,轻松搞定数据库的读写分离、垂直分库、水平分库
- 设置Eclipse缩进为4个空格,增强代码规范
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- CentOS6,CentOS7官方镜像安装Oracle11G
- Docker安装Oracle12C,快速搭建Oracle学习环境