-
CentOS 7下配置hadoop 2.8 分布式集群
Hadoop是一个由Apache基金会所开发的分布式系统基础架构,实现分布式文件系统HDFS,用于存储大数据集,以及可以以流的形式访问(streaming access)文件系统中的数据。Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,则MapReduce为海量的数据提供了计算。本文描述了在CentOS 7下...
时间:2018-11-29点击:434收藏
-
3行Python代码完成人脸识别
Face Recognition软件包 这是世界上最简单的人脸识别库了。你可以通过Python引用或者命令行的形式使用它,来管理和识别人脸。 该软件包使用dlib中最先进的人脸识别深度学习算法,使得识别准确率在《Labled Faces in the world》测试基准下达到了99.38%。 它同时提供了一个叫face_recognition的命令行工具,...
时间:2018-11-29点击:658收藏
-
Python 爬虫之模拟登陆CSND[转]
工具 基本的脚本语言是Python,虽然不敢说是最好的语言,至少是最好的之一(0.0),用模拟登陆,我们需要用到多个模块,如下: 1、requests 2、BeautifulSoup requests 安装 下载源码安装 gitclonegit://github.com/kennethreitz/requests.git cdrequests pipinst...
时间:2018-11-29点击:804收藏
-
Mysql 增量备份脚本 innobackupex 增量备份 mysql自动备份
Mysql 增量备份脚本 1 线上环境有时候考虑到需要做增量备份数据库,所以写了个简单的脚本 2添加自动任务每小时或者更短时间执行就好了 #!/bin/sh #author RuM #date 2015-07-10 BAKDIR=/tmp/mysqlbak BAKDIR_FULL=$BAKDIR/full BAKDIR_ADD=$BAKDIR/add CON...
时间:2018-11-29点击:558收藏
-
spring cloud 脱离注册中心,指定IP来测试
在开发项目的过程中,我们经常会共用注册中心,这样方便和节省资源。但是这样也往往会碰到,服务会调用到其他同事的服务,这样对于我们自己测试来说,非常之不方便。 在dubbo里面,它提供用本地连接的方式,可以解决这个问题。 在springcloud里面,当然也有类似的解决方式,如下: #禁用注册中心 ribbon.eureka.enabled=false serv...
时间:2018-11-29点击:814收藏
-
分布式和集群区别?什么是云计算平台?分布式的应用场景?
分布式是指将一个业务拆分不同的子业务,分布在不同的机器上执行,集群是指多台服务器集中在一起,实现同一业务,可以视为一台计算机,一个云计算平台,就是通过一套软件系统把分布式部署的资源集中调度使用。要应对大并发,要实现高可用,既需要分布式,也离不开集群。 分布式和集群区别? 分布式 分布式:是指将一个业务拆分不同的子业务,分布在不同的机器上执行。 集群 集群:是...
时间:2018-11-29点击:635收藏
-
借助Docker单机秒开数十万TCP连接[转]
熟悉网络编程的都清楚系统只有65535个端口可用,1024以下的端口为系统保留,所以除去系统保留端口后可用的只有65411个端口,而一个TCP连接由TCP四元组(源IP、源端口、TCP、目标IP、目标端口)唯一确定,所以单机一个网卡时客户端最多只能打开65411个TCP连接,而有时我们的TCP服务需要数十万、上百万甚至更多TCP连接的压力测试,这时怎么办呢,...
时间:2018-11-29点击:582收藏
-
SpringBoot开发案例之整合日志管理
概述 参考文档:Logging 这里顺便引用以下部分原文,当然看不明白也没关系,我们有有道翻译,如果翻译的不准确,后面会提供详细配置分享给大家。 SpringBootusesCommonsLoggingforallinternallogging,butleavestheunderlyinglogimplementationopen.Defaultconfig...
时间:2018-11-29点击:651收藏
-
Java多线程和并发基础面试问答,错过会后悔哦【转】
第一:Java多线程面试问题 1:进程和线程之间有什么不同? 一个进程是一个独立(self contained)的运行环境,它可以被看作一个程序或者一个应用。而线程是在进程中执行的一个任务。Java运行环境是一个包含了不同的类和程序的单一进程。线程可以被称为轻量级进程。线程需要较少的资源来创建和驻留在进程中,并且可以共享进程中的资源。 2:多线程编程的好处是...
时间:2018-11-29点击:546收藏
-
(Hadoop+Spark)集群环境搭建
环境准备: 在虚拟机下,大家三台Linux ubuntu 14.04 server x64 系统(下载地址:http://releases.ubuntu.com/14.04.2/ubuntu-14.04.2-server-amd64.iso): 192.168.1.200 master 192.168.1.201 node1 192.168.1.202 no...
时间:2018-11-29点击:946收藏
-
JavaWeb三大组件之监听器(Listener)
监听器是一个专门用于对其他对象身上发生的事件或状态改变进行监听和相应处理的对象,当被监视的对象发生情况时,立即采取相应的行动。监听器其实就是一个实现特定接口的普通java程序,这个程序专门用于监听另一个java对象的方法调用或属性改变,当被监听对象发生上述事件后,监听器某个方法立即被执行。 上述概念设计到3个名词概念: 1.事件源:即谁产生的事件 2.事件对...
时间:2018-11-29点击:577收藏
-
Spring-Boot使用profile来配置不同环境的配置文件
在springboot的开发中,有时候我们会有不同的配置,例如日志打印,数据库连接等,开发,测试,生产每个环境可能配置都不一致,还好,springboot支持通过不同的profile来配置不同环境的配置,下面就大致介绍一下yml配置文件跟properties配置文件怎么使用profile配置不同环境的配置文件... 先介绍一下开发环境: jdk版本是1.8 ...
时间:2018-11-29点击:551收藏
点击排行
推荐阅读
最新文章
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- CentOS7,8上快速安装Gitea,搭建Git服务器
- CentOS8安装MyCat,轻松搞定数据库的读写分离、垂直分库、水平分库
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- CentOS7,CentOS8安装Elasticsearch6.8.6
- CentOS关闭SELinux安全模块
- SpringBoot2初体验,简单认识spring boot2并且搭建基础工程
- Eclipse初始化配置,告别卡顿、闪退、编译时间过长
- SpringBoot2整合Redis,开启缓存,提高访问速度
- CentOS7设置SWAP分区,小内存服务器的救世主