首页 文章 精选 留言 我的

精选列表

搜索[centos],共5623篇文章
优秀的个人博客,低调大师

单机安装 CentOS 5 + hadoop-0.20.0

这种安装方式仅仅适用于做实验,快速搭建Hadoop环境,不适合生产环境。 Ubuntu 环境 $ sudo apt-get install openjdk-7-jre 过程141.1.Master configure Download and Installing Software $ cd /usr/local/src/ $ wget http://apache.etoak.com/hadoop/core/hadoop-0.20.0/hadoop-0.20.0.tar.gz $ tar zxvf hadoop-0.20.0.tar.gz $ sudo cp -r hadoop-0.20.0 .. $ sudo ln -s hadoop-0.20.0 hadoop $ cd hadoop Configuration hadoop-env.sh $ vim conf/hadoop-env.sh export JAVA_HOME=/usr conf/core-site.xml $ vim conf/core-site.xml <configuration> <property> <name>fs.default.name</name> <value>hdfs://localhost:9000</value> </property> </configuration> conf/hdfs-site.xml $ vim conf/hdfs-site.xml <configuration> <property> <name>dfs.replication</name> <value>1</value> </property> </configuration> conf/mapred-site.xml $ vim conf/mapred-site.xml <configuration> <property> <name>mapred.job.tracker</name> <value>localhost:9001</value> </property> </configuration> Setup passphraseless ssh Now check that you can ssh to the localhost without a passphrase: $ ssh localhost If you cannot ssh to localhost without a passphrase, execute the following commands: $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa $ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys Execution Format a new distributed-filesystem: $ bin/hadoop namenode -format Start the hadoop daemons: $ bin/start-all.sh When you're done, stop the daemons with: $ bin/stop-all.sh Monitor Browse the web interface for the NameNode and the JobTracker; by default they are available at: NameNode - http://localhost:50070/ JobTracker - http://localhost:50030/ Test $ bin/hadoop dfs -mkdir test $ echo helloworld > testfile $ bin/hadoop dfs -copyFromLocal testfile test/ $ bin/hadoop dfs -ls Found 1 items drwxr-xr-x - neo supergroup 0 2009-07-10 14:18 /user/neo/test $ bin/hadoop dfs -ls test $ bin/hadoop dfs –cat test/file 过程141.2.slave config SSH $ scp neo@master:~/.ssh/id_dsa.pub .ssh/master.pub $ cat .ssh/master.pub >> .ssh/authorized_keys Hadoop $ scp neo@master:/usr/local/hadoop /usr/local/hadoop 原文出处:Netkiller 系列 手札 本文作者:陈景峯 转载请与作者联系,同时请务必标明文章原始出处和作者信息及本声明。

优秀的个人博客,低调大师

CentOS下清空文件的几种方法

1.用覆盖重定向清空文件 2.用echo命令+覆盖重定向清空文件 or 3.用null清空文件 or or 4.用sed命令清空文件 5.用truncate命令清空文件 写到这里,我要把truncate命令跟大家说一下 truncate缩小或将文件的大小扩展到指定的大小 语法:truncate [选项] [文件...] 选项: -c:不创建任何文件 -r:选项后加文件名;将指定文件的大小作为此文件的大小 -s:选项后可以不用加空格;使用此大小作为文件的大小 注意:“-r”选项和“-s”选项不能一起用 注:本文中[]里的内容,不是可选的,而是不固定的!

优秀的个人博客,低调大师

CentOS下使用df命令查看磁盘空间

查看Linux磁盘空间的工具有很多,那么怎么使用命令来查看磁盘空间呢?那就要用到df命令了,下面小编给大家介绍下使用df命令查看Linux磁盘空间的方法。 [root@localhost ~]# df -h 文件系统 容量 已用 可用 已用% 挂载点 /dev/sda2 14G 11G 2.6G 82% / /dev/sda1 99M 14M 81M 14% /boot tmpfs 442M 275M 168M 63% /dev/shm /dev/mapper/vg_test-lv_test 24M 1.3M 21M 6% /mnt/lvm [root@localhost ~]# 当然你可能并不关系磁盘还剩余多少空间,你是需要知道当前的文件夹下的磁盘使用情况: [root@localhost ~]# du --max-depth=1 -h 24K 。/.gnome www.2cto.com 8.0K 。/.eggcups 8.0K 。/.config 136K 。/.gnome2 16K 。/.chewing 8.0K 。/.gnome2_private 8.0K 。/.Trash 224K 。/.gstreamer-0.10 28K 。/Desktop 48K 。/.nautilus 48K 。/.metacity 240K 。/.scim 3.4M 。/.mozilla 1012K 。/.kde 12K 。/.superkaramba 40K 。/.local 8.0K 。/.qt 272K 。/.gconf 32K 。/.mcop 16K 。/.redhat 1.7M 。/.thumbnails 8.0K 。/.gconfd 7.5M 。 [root@localhost ~]# 看上面使用了du --max-depth=1 -h的命令来查找磁盘的使用情况,因为后面没有跟路径,它就默认是当前的路径。这个命令的-h参数是为了方便你读懂每个文件的大小,如果没有这个参数显示的文件大小就没有k,M,G等。执行命令后,前面n-1行的是该目录下每个文件夹的大小。最后一行显示的是该目录总的大小。 然后你会说不在乎该目录下每个文件的大小,你只想知道其中某一个文件(文件夹)的大小,那么有没有办法呢?当然你应该记得,我一直强调的,方法总比问题多,这儿也不例外。 请看下面的例子: [root@localhost ~]# du -sh 7.5M 。 www.2cto.com [root@localhost ~]# 聪明的你一定发现了这里显示的大小和上面最后一行的大小是一样的。这就是说这里显示的大小是该目录的总大小。 我知道你心里在冷笑,不是方法比问题多吗?这里说的也只有一个答案。当然,我不会让你失望的。另一个方法比较土,但是还是可以解决问题的。 [root@localhost ~]# du -h --max-depth=0 7.5M 。 [root@localhost ~]# 我想告诉你的是man手册里面已经告诉了:--max-depth=0的功能和-s的功能是一样的。 当然你也可以通过sed打印最后du -h --max-depth=1一行来解决问题,但我并不推荐。 这里涉及到一个原则,尽量使用命令提供选项的原始功能。如果命令没有提供该功能,才需要我们自己使用grep,sed,awk来选取我们需要的行。 当然du命令后面可以跟文件路径,来查看指定路径的大小的。 [root@localhost ~]# du -sh /opt/oracle 5.6G /opt/oracle [root@localhost ~]# 上面就是使用df命令查看Linux磁盘空间的介绍了,如果磁盘比较大的话,那么可能就要花费更多一些的时间了,你学会了吗?

资源下载

更多资源
优质分享App

优质分享App

近一个月的开发和优化,本站点的第一个app全新上线。该app采用极致压缩,本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

Sublime Text

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还可自定义键绑定,菜单和工具栏。Sublime Text 的主要功能包括:拼写检查,书签,完整的 Python API , Goto 功能,即时项目切换,多选择,多窗口等等。Sublime Text 是一个跨平台的编辑器,同时支持Windows、Linux、Mac OS X等操作系统。

用户登录
用户注册