Python3.6下scrapy框架的安装

2018-12-12 496

Python3.6下scrapy框架的安装

首先考虑使用最简单的方法安装

pip install scrapy

命令安装，提示

Failed building wheel for Twisted

Microsoft Visual C++ 14.0 is required...

于是开始问度娘应该怎样安装，看了几篇博客，虽然和我的问题不十分相同，但是也受到了启发，知道应该怎样解决我的问题了。解决问题的过程总结如下：

1、直接使用pip install scrapy安装不成功可以安装whl格式的包

首先下载scrapy的whl包

下载地址：http://www.lfd.uci.edu/~gohlke/pythonlibs/

在网页中搜索scrapy找到

Scrapy‑1.3.3‑py2.py3‑none‑any.whl

下载了scrapy的whl包先不要着急安装，接着

2、安装whl格式包需要安装wheel库

看到别人的博客上说可以直接使用pip install wheel安装wheel，由于我已经安装过wheel了，在这里就不用安装了，就没有测试怎么安装wheel。

没有安装过wheel库的请先安装。

3、scrapy依赖twiste，同样使用whl格式的包进行安装

还是进入http://www.lfd.uci.edu/~gohlke/pythonlibs/，在网页中搜索twisted找到其对应的whl包并下载

Twisted‑17.1.0‑cp36‑cp36m‑win_amd64.whl

根据你的Python的版本选择合适的包，名称中间的cp36是python3.6的意思，amd64是python的位数

下载完成后使用cmd打开windows的命令行窗口，进入whl包所在的文件夹执行如下命令

pip install [whl]

[whl]是whl包的名字，即：

pip install Twisted-17.1.0-cp36-cp36m-win_amd64.whl

Scrapy-1.3.3-py2.py3-none-any.whl包使用同样的方式安装，只是应该等到其所有依赖的包安装完成后才能进行安装，现在还不能安装

4、scrapy依赖lxml包，需要先安装lxml包，lxml包依赖libxml2，libxml2-devel，所以安装lxmllibxml2， libxml2-devel。幸运的是之前我之前已经安装过lxml

5、所有准备工作做完，终于可以安装scrapy包了，进入Scrapy-1.3.3-py2.py3-none-any.whl所在的目录

pip install Scrapy-1.3.3-py2.py3-none-any.whl

Successfully ! 先别急着撒花，是否真的安装成功了，还需要验证，输入scrapy -h

显示scrapy的相关信息，大功告成，撒花~~~

---------------------

作者：Lavi_qq_2910138025

来源：CSDN

原文： https://blog.csdn.net/liuweiyuxiang/article/details/68929999

微信关注我们

原文链接：https://yq.aliyun.com/articles/679042

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Java-override重写与overload重载

重载（overload）在同一个类中，方法名相同，参数列表不同（参数个数，参数顺序，参数类型）仅仅返回类型不同不足以称为方法的重载（重载与方法返回类型无关）仅仅参数变量名称不同是不可以的重写（override）子类继承父类，方法名相同，参数列表相同，权限修饰符作用范围要大于父类的范围父类用public修饰的方法被重写，子类中方法的修饰符只能是public 静态方法不能被重写

2018-12-12

582

这是最简单的一种算法,其依赖于计算机的强大计算能力,来穷尽每一种可能的情况,从而达到求解问题的目的,效率并不高,但是适合用于一些没有明显规律可循的场合基本思想就是从所有可能的情况中搜索正确的答案,步骤如下对于一种可能的情况,计算其结果判断结果是否满足要求,如果不满足就执行第一步来搜索下一个可能的情况,如果满足要求,则表示寻找到一个可能的答案使用穷举算法时,需要明确问题的答案范围,这样才可以在指定范围内搜索答案,指定范围之后,就可以使用循环语句和判断条件逐步验证答案的正确性,从而得到需要的正确答案其实说这么多,就是用循环去遍历所有可能出现的结果鸡兔同笼问题上有三十五头,下有九十四足,问鸡兔几何? 一共有三十五只头,那么鸡最多有三十五只,剩下的就是兔的个数,所以核心的代码是很简单的 private static void qiongJu(int head, int foot) { int rabbitCount = 0; for (int i = 0; i <= head; i++) { rabbitCount = head - i; if (rabbitCount*...

2018-12-13

701

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。