首页 文章 精选 留言 我的

精选列表

搜索[文本图像鉴伪],共10007篇文章
优秀的个人博客,低调大师

Redis专题-集群安装

教程大纲 在虚拟机中安装CentOS 在每个CentOS中都安装Java和Perl 在4个虚拟机中安装CentOS集群 配置4台CentOS为ssh免密码互相通信 注意事项 从零开始,纯手工,一步一步搭建出一个4个节点的CentOS集群。 为我们后面的课程做准备,后面会讲解大型的分布式的redis集群架构,一步一步纯手工搭建redis集群,集群部署,主从架构,分布式集群架构。 后面的课程,会讲解一些实时计算技术的应用,包括storm,讲解一下storm的基础知识,对于java工程师来说,会用就可以了,用一些storm最基本的分布式实时计算的feature就ok了,搭建一个storm的集群。 部署我们整套的系统,nginx,tomcat+java web应用,mysql。 尽量以真实的网络拓扑的环境,去给大家演示一下整套系统的部署,不要所有东西,redis集群+storm集群+nginx+tomcat+mysql,全部放在一个节点上玩儿,也可以去试一试,但是作为课程来说,效果不是太理想。 redis集群,独立的一套机器 storm集群,独立的一套机器 nginx,独立部署 tomcat + java web应用,独立部署 mysql,独立部署 十几个机器,去部署整套系统,我在自己的笔记本电脑上来讲课的,这么玩儿撑不住的。 i5,8G+Mac OS 凶他 4台虚拟机,每台虚拟机是1G的内存,电脑基本还能撑住 电脑本身就6个G内存的话,学习这种大型的系统架构的课程,是有点吃力,给大家建议,几个G的内存条,也就几百块钱,给自己最好加个内存条,至少到8G以上 16G凑合,玩的很嗨。 纯手工,从零开始。 很多视频课程,里面讲师都是现成的虚拟机,自己都装好了,包括各种必要的软件 讲课的时候直接基于自己的虚拟机就开始讲解了 很多同学就会发现,想要做到跟讲师一样的环境都很难,自己可能照着样子装了个环境,但是发现,各种问题,各种报错,环境起不来。 学习课程的过程很艰难 学视频课程,肯定是要跟着视频的所有的东西自己去做一做,练一练,结果你却因为环境问题,做不了,连不了,那就太惨了 从centos的镜像文件,到所有的需要使用的软件,全都给你,在自己电脑上,下载一个虚拟机管理软件,virtual box,就可以跟着玩儿了 如果你一步一步跟着视频做,搭建起整个环境,应该问题不大 环境问题,给大家弄成傻瓜式的。 1、在虚拟机中安装CentOS 动一个virtual box虚拟机管理软件(vmware,我早些年,发现不太稳定,主要是当时搭建一个hadoop大数据的集群,发现每次休眠以后再重启,集群就挂掉了) virtual box,发现很稳定,集群从来不会随便乱挂,所以就一直用virtual box了. 1.使用课程提供的CentOS 6.5镜像即可,CentOS-6.5-i386-minimal.iso。 2.创建虚拟机: 打开Virtual Box 点击“新建”按钮 点击“下一步” 输入虚拟机名称为eshop-cache01 选择操作系统为Linux,选择版本为Red Hat,分配1024MB内存,后面的选项全部用默认。 在Virtual Disk File location and size中,一定要自己选择一个目录来存放虚拟机文件,最后点击“create”按钮, 开始创建虚拟机。 3.设置虚拟机网卡: 选择创建好的虚拟机,点击“设置”按钮,在网络一栏中,连接方式中,选择“Bridged Adapter”。 4.安装虚拟机中的CentOS 6.5操作系统:选择创建好的虚拟机,点击“开始”按钮,选择安装介质(即本地的CentOS 6.5镜像文件),选择第一项开始安装-Skip-欢迎界面Next-选择默认语言-Baisc Storage Devices-Yes, discard any data-主机名:spark2upgrade01-选择时区-设置初始密码为hadoop-Replace Existing Linux System-Write changes to disk-CentOS 6.5自己开始安装。 5.Reboot 安装完以后,CentOS会提醒你要重启一下,就是reboot,你就reboot就可以了。 6.配置网络 vi /etc/sysconfig/network-scripts/ifcfg-eth0 配置内容如下所示: DEVICE=eth0 TYPE=Ethernet ONBOOT=yes BOOTPROTO=dhcp service network restart ifconfig BOOTPROTO=static IPADDR=192.168.0.X NETMASK=255.255.255.0 GATEWAY=192.168.0.1 service network restart 7.配置hosts vi /etc/hosts 配置本机的hostname到ip地址的映射 8.关闭防火墙 service iptables stop service ip6tables stop chkconfig iptables off chkconfig ip6tables off vi /etc/selinux/config SELINUX=disabled 注意:一定要关闭本地宿主机上的防火墙。 后面要搭建集群,有的大数据技术的集群之间需要通信,在本地你设置了防火墙的话,可能会导致集群之前没办法互相连接,相互通讯,会导致搭建失败。 9.配置yum yum clean all yum makecache yum install wget 2、在每个CentOS中都安装Java和Perl 1.安装JDK 1、将jdk-7u60-linux-i586.rpm通过WinSCP上传到虚拟机中 2、安装JDK:rpm -ivh jdk-7u65-linux-i586.rpm 3、配置jdk相关的环境变量 vi .bashrc export JAVA_HOME=/usr/java/latest export PATH=$PATH:$JAVA_HOME/bin source .bashrc 4、测试jdk安装是否成功:java -version 2.安装Perl yum install -y gcc wget http://www.cpan.org/src/5.0/perl-5.16.1.tar.gz tar -xzf perl-5.16.1.tar.gz cd perl-5.16.1 ./Configure -des -Dprefix=/usr/local/perl make && make test && make install perl -v 为什么要装perl?我们整个大型电商网站的详情页系统,复杂。java+nginx+lua,需要perl。 perl,是一个基础的编程语言的安装,tomcat,跑java web应用 3.在4个虚拟机中安装CentOS集群 (1)按照上述步骤,再安装三台一模一样环境的linux机器 (2)另外三台机器的hostname分别设置为eshop-cache02,eshop-cache03,eshop-cache04 (3)安装好之后,在每台机器的hosts文件里面,配置好所有的机器的ip地址到hostname的映射关系 比如说,在eshop-cache01的hosts里面 192.168.31.187 eshop-cache01 192.168.31.xxx eshop-cache02 192.168.31.xxx eshop-cache03 192.168.31.xxx eshop-cache04 4、配置4台CentOS为ssh免密码互相通信 4.1 首先在三台机器上配置对本机的ssh免密码登录 ssh-keygen -t rsa 生成本机的公钥,过程中不断敲回车即可,ssh-keygen命令默认会将公钥放在/root/.ssh目录下 cd /root/.ssh cp id_rsa.pub authorized_keys 将公钥复制为authorized_keys文件,此时使用ssh连接本机就不需要输入密码了 4.2 接着配置三台机器互相之间的ssh免密码登录 使用ssh-copy-id -i hostname命令将本机的公钥拷贝到指定机器的authorized_keys文件中 java,在公司里做项目,有几个人是自己去维护linux集群的啊????? 几乎没有,很少很少,类似这一讲要做的事情,其实都是SRE,运维的同学,去做的 但是对于课程来说,我们只能自己一步一步做,才有环境去学习啊!!! 基于虚拟机的linux集群环境,都准备好了,手上有4台机器,后面玩儿各种redis、kafka、storm、tomcat、nginx,都有机器了. 利其事,必先利其器!下节继续! 个人博客:http://www.markfork.com 个人简书:https://www.jianshu.com/u/c169fce5179b 慕课网:https://www.imooc.com/u/2150709/articles

优秀的个人博客,低调大师

谈 Windows 的开源

最近一则 Windows 未来可能走向开源的报道,在业内引起了强烈反响。多数评论认为这是传统PC产业疲软下自救的选择,但事实真的如此吗? https://yqfile.alicdn.com/fa00965d11e107e601a3f3f02d4dcb0225898eba.png" > PC市场的疲软,和在智能手机市场表现不佳,并不是因为Windows闭源。PC市场疲软的原因很多,其中用户需求的疲软及平板电脑和智能手机的衝击,是比较重要的因素。但从整个PC软生态环境看,Windows 仍然佔据著不可替代的位置和优势,儘管有Mac OS X和Chrome OS与其竞争,但目前收效甚微。再看智能手机市场,微软之所以在这个市场的表现不佳,是因为之前对移动市场战略不重视。微软意识到移动市场重要性之后,採取了所谓「系统融合」策略。融合的想法很好,但从 Windows 10推出之前,微软的融合策略实际上都不是真正融合,没有採用统一的 Windows 核心。传统PC和以智能手机和平板电脑为代表的移动市场,是完全不同的应用场景和方式。这就决定了用同一个系统,要兼顾跨界体验的技术是困难的,这也是为何Apple和Google到今天依然在移动和PC市场採用不同系统的原因。 另外就是微软在移动市场本身发展策略的问题,例如併购诺基亚期间,竟出现推出自身Meego系统的N9手机和基于Android系统的手机,让业内对于微软在移动市场的Windows生态系统产生摇摆。更重要的是併购诺基亚后,微软主打的低价策略(手机ASP仅为45美元),让本就脆弱的微软移动生态系统更加脆弱。相关研究分析,购买高价手机的用户,更愿意付费购买应用程序,反之亦然。而微软手机的低价策略,让用户很难购买应用程序,至少与iOS和Android相比如是。但随之导致的连锁效应,就是开发者很难从微软的移动生态系统中获得收入,进而影响了他们为微软开发应用的热情,形成了恶性循环。例如作为WP的热门天气应用之一的Weather Flow,最近就正式从应用商店下架,开发者Gergely Orosz称原因是入不敷出。Weather Flow的数据使用费高达每月1,500美元,但他从Weather Flow所得的收益才每月500美元,还在下降之中。另据据统计,目前在iOS和Android平台许多的主流应用程序,都尚未进驻到Windows平台。即使已经进驻,其体验与在iOS和Android平台上的也存有差距。 如果 Windows 真的开源会怎样?在PC市场,现有的Windows生态系统将会被打破,诸多的应用程序将要推倒重来。这对于一直依赖于微软的企业用户,无疑是最大打击。开源之后会怎样,在移动市场可以对比下Android,碎片化将不可避免。碎片化的结果,是Google未能通过Android,将新应用程序安装到用户的手机上,这也是Android One出现的主因,即通过该系统收回对于Android的控制权。但从目前看,效果并不明显。因此 Windows 开源无论是在PC,还是在移动市场,对于微软弊大于利。况且所谓Windows开源的说法,仅来自微软一位技术员工口中,他仅是说说而已,大家不用太过认真。文章转载自 开源中国社区 [http://www.oschina.net]

优秀的个人博客,低调大师

Hbase分布式

其实我就是要让数据存储在hdfs上而已。。。。。。。。 多配置点东西就好了,在hbase-site.xml中加入: <configuration> <property> <name>hbase.rootdir</name> <value>hdfs://yangsy132:9000/user/hive/warehouse/</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/home/hadoop/zookeeper-3.4.6/data</value> </property> </configuration> 然后启动hbase即可,但我发现查询时报错啊。。报错信息被刷掉了- -大概错误是: ERROR:org.apache.hadoop.hbase.PleaseHoldException:org.apache.hadoop.hbase.PleaseHoldException:Masterisinitializing 修改 vi /etc/host中 如果IP地址为127.0.1.1或:1 则改为127.0.0.1 重启即可 重启后又发现 继续报错啊。。。错误信息大概是: ERROR: Can't get master address from ZooKeeper; znode data == null 进入zookeeper的data目录下 删除红框中的 重启即可 唉~所有环境都好了木有时间玩~ 只能等周末好好玩一把~

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Nacos

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称,一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集,帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

WebStorm

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源,继承了IntelliJ IDEA强大的JS部分的功能。

用户登录
用户注册