Python爬虫环境常用库安装
Python爬虫环境常用库安装
1:urllib urllib.request
这两个库是python自带的库,不需要重新安装,在python中输入如下代码:
import urllib import urllib.request response=urllib.request.urlopen("http://www.baidu.com") print(response)
- 1
- 2
- 3
- 4
返回结果为HTTPResponse的对象: <http.client.HTTPResponse object at 0x000001929C7525F8>
2:正则表达式模块
import re
- 1
该库为python自带的库,直接运行不报错,证明该库正确安装。
3:request库的安装
安装命令:pip install requests
验证该库是否安装成功,运行如下代码:
import requests response=requests.get("http://www.baidu.com") print(response)
- 1
- 2
- 3
4:selenium库的安装
由于如果需要使用selenium的话,需要为本机配置对应浏览器的驱动,下面以chomedriver为例,首先安装chromedriver,chromedriver与支持对应的chrome版本如下:
chromedriver版本 支持的Chrome版本
v2.33 v60-62
v2.32 v59-61
v2.31 v58-60
v2.30 v58-60
v2.29 v56-58
v2.28 v55-57
v2.27 v54-56
v2.26 v53-55
v2.25 v53-55
v2.24 v52-54
v2.23 v51-53
v2.22 v49-52
v2.21 v46-50
v2.20 v43-48
v2.19 v43-47
v2.18 v43-46
v2.17 v42-43
v2.13 v42-45
v2.15 v40-43
v2.14 v39-42
v2.13 v38-41
v2.12 v36-40
v2.11 v36-40
v2.10 v33-36
v2.9 v31-34
v2.8 v30-33
v2.7 v30-33
v2.6 v29-32
v2.5 v29-32
v2.4 v29-32
如何查看本机的chrome的版本,具体方法如下:
chromedriver的下载地址如下:
http://chromedriver.storage.googleapis.com/index.html
chromedriver解压后放到Python或者其他配置了环境变量的目录下。
测试代码及运行结果如下:
安装plantomjs
下载地址为:http://phantomjs.org/download.html
下载完成后,解压文件夹,将文件夹中phantomjs.exe的拷贝到Python或者其他配置了环境变量的目录下,或单独为其配置环境变量,测试代码及运行结果如下:
5: 安装LXML
6:安装beautifulsoup
7:安装pyquery
8:安装pymysql
9:安装pymongo
10:安装redis
11:安装flask
12:安装django
原文地址https://blog.csdn.net/qq_29186489/article/details/78581249
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
转义符与运算符
转义符:不能直接输出双引号、单引号、或斜杠等,直接写的话Java会认为他是代码中的语法格式,会报错。 \\ 代码中输出一个斜杠 \"输出一个双引号 \'输出一个单引号 告诉Java这是内容不会语法 \n换行 回车 换行 public class T1 { public static void main(String[] args) { System.out.println("---------"); System.out.println("\n"); System.out.println("--------"); } } 结果多了一个换行 \t制表 :八个符号为一组 数字不够8个用空格补 满了另起8个 数字不够8个用空格补。 public class T1{ public static void main(String[] args) { System.out.println("1545\t6487");//这里书写1.要注意双引号 2.注意斜杠不要写错 } } 注意运算时他会向最大的值转化 你要想整数变成小数必须把其中一个变成float 或double 从小到大自动转换:...
- 下一篇
Java 面向对象 之 Object 类
http://www.verejava.com/?id=16992832835152 /** 知识点: Object 类 注意: 1. Object 是所有类的根类, 也就是说所有类默认都继承Object 只是省略没有写 2. 当 println()输出一个对象的时候 自动调用了 Object的 toString() 方法 3. Object toString() 方法返回的是 : 类名+@+16进制的哈希码hashCode地址 哈希码 代表对象的内存地址,所以如果比较两个对象的引用相等==必须 哈希码相等 4. Object equals(Object obj) 方法比较的也是引用内部是以==实现的 5. String 对象的equals()方法怎么是比较内容了? 6. 如果要equals()比较两个对象的内容相等我们需要复写equals 方法 7. 当Object的子类复写了 toString() 方法, println()输出时调用子类复写的 toString() 方法 8. 如果复写了equals()方法,为了保证对象相等哈希码hashcode必须相等的特性, 我们也要复写ha...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- CentOS7,8上快速安装Gitea,搭建Git服务器
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- Docker安装Oracle12C,快速搭建Oracle学习环境
- Windows10,CentOS7,CentOS8安装Nodejs环境
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- CentOS7,CentOS8安装Elasticsearch6.8.6
- CentOS8安装Docker,最新的服务器搭配容器使用
- 设置Eclipse缩进为4个空格,增强代码规范
- CentOS7安装Docker,走上虚拟化容器引擎之路