Linux学习笔记（Ubuntu操作系统）之hadoop学习之路
1：检查虚拟机的ip命令：ifconfig 2：普通用户切换root用户命令：su 3：root用户切换普通用户命令：su 用户名 4：普通用户执行系统执行前面加命令：sudo 5：查询主机名命令：hostname或uname –n 6：修改主机名命令：vi /etc/hostname（hostname master立即生效，不用重启，---》exit,---》su即可） centos操作系统修改主机名命令：vi /etc/sysconfig/network 7：修改域名和主机名对应关系命令：vi /etc/hosts（修改主机名的意义就是和域名一致，修改之后可以ping一下修改的主机名） (补充：vi编辑器三种模式，命令行模式（esc），编辑模式(a,i,o,s)，尾行模式(esc :)) 8：vi编辑器中在命令模式中复制一行命令：yy 9：vi编辑器中在命令模式中粘贴一行命令：p 10：vi编辑器中在命令模式中剪切一行命令：dd vi编辑器里面查询内容：/要查找的内容；查找下一个n，查找上一个N。 more somefile 可以翻页查看, 下翻一页(空格) 上翻一页(b) 退出(q)less somefile 可以翻页查看,下翻一页(空格) 上翻一页(b)，上翻一行(↑) 下翻一行(↓) 可以搜索关键字(/keyword)tail -10 install.log 查看文件尾部的10行tail -f install.log 小f跟踪文件的唯一inode号，就算文件改名后，还是跟踪原来这个inode表示的文件tail -F install.log 大F按照文件名来跟踪head -10 install.log 查看文件头部的10行 后台服务管理service network status 查看指定服务的状态service network stop 停止指定服务service network start 启动指定服务service network restart 重启指定服务service --status-all 查看系统中所有的后台服务设置后台服务的自启配置chkconfig 查看所有服务器自启配置chkconfig iptables off 关掉指定服务的自动启动chkconfig iptables on 开启指定服务的自动启动 11：删除文件或者目录命令：rm -rf 文件名 12：创建一个文件夹命令：mkdir 目录名称（文件夹名） mkdir -p [目录名称] -p递归创建 命令英文：make directories 13：创建一个文件命令：touch 文件名 14：测试是否有网络ping命令：例如ping www.baidu.com 15：重启linux命令：reboot 16：清空命令：clear 17：解压缩命令：tar zxvf 文件名 18：查看全路径命令：pwd 19：ubuntu操作系统图形化到命令行：ctrl+alt+f1（减少浪费资源） 20：ubuntu操作系统命令行到图形化：ctrl+alt+f7（方便操作） 21：ubuntu启动时即为命令行：vi /etc/init/rc-sysinit.conf 将env DEFAULT_RUNLEVEL=2改为env DEFAULT_RUNLEVEL=3 22：修改文件权限的命令： sudo chmod 600 ××× （只有所有者有读和写的权限）sudo chmod 644 ××× （所有者有读和写的权限，组用户只有读的权限）sudo chmod 700 ××× （只有所有者有读和写以及执行的权限）sudo chmod 666 ××× （每个人都有读和写的权限）sudo chmod 777 ××× （每个人都有读和写以及执行的权限） 23：查询目录中的内容的命令：ls命令 ：ls [选项] [文件或者目录] 1 选项：-a 显示所有的文件，包括隐藏文件（.开头的是隐藏文件） 2 3 -l 显示详细信息（-list） 4 5 -d查看目录属性 6 7 -h人性化显示文件大小,可显示文件具体大小 8 9 -i显示inode 24：文件权限的解释： 如-rw-r--r-- 1 第一个-代表：文件类型（-文件d目录 | 软连接文件） 2 3 第一组：rw- u所有者（user） 4 5 第二组：r-- g所有组（group） 6 7 第三组：r-- o其他人（other） 8 9 解释：r(read)读 w(write)写 x(execute)执行 25：防火墙的命令： #查看防火墙状态 service iptables status #关闭防火墙 service iptables stop#查看防火墙开机启动状态 chkconfig iptables --list#关闭防火墙开机启动 chkconfig iptables off 26：解压缩的命令： tar -zxvf 将要解压缩的文件名称 -C 指定的目录 27：切换目录的命令： cd [目录] 命令英文原意：change directory 简化操作： cd ~进入当前用户的家目录 cd - 进入上次目录 cd .. 进入上一级目录 cd .进入当前目录 28：linux清屏操作的命令：clear/ctrl+L 29：linux的相对路径和绝对路径问题： --->相对路径：参照当前所在目录，进行查找，如cd ../usr/local/src/ --->绝对路径：从根目录开始指定，一级一级递归查找，在任何目录下， 都能进入指定位置，如cd /etc/ 30：显示当前的工作目录的命令：pwd（print working directory执行pwd指令可立刻得知目前所在的工作目录的绝对路径名称。） 31：自动补全的tab键：神奇的tab键，按一下tab键没反应，再按一下tab键，就会列出该目录下的所有目录，供你选择。 32：删除空目录rmdir [目录名称] ----》命令英文原意：remove empty directories 33：删除文件或者目录：rm命令 rm -rf [文件或者目录]，命令英文原意：remove 参数： -r 删除目录 -f 强制删除 34：复制命令cp cp [参数] [原文件或者目录] [目标目录] 命令英文原意：copy 参数： -r 复制目录 -p 连带文件属性复制 -d 若源文件是链接文件，则复制链接属性 -a 相当于 -pdr 35：剪切或者改名命令：mv(英文原意move)； 36：linux的目录学习（可以在家目录root或者home目录下面操作，以及tmp目录下随便放内容，其他目录最好不要动）： / 根目录 /bin 存放必要的命令 /boot 存放内核以及启动所需的文件等 /dev 存放设备文件 /etc 存放系统的配置文件 /home 用户文件的主目录，用户数据存放在其主目录中 /lib 存放必要的运行库 /mnt 存放临时的映射文件系统，我们常把软驱和光驱挂装在这里的floppy和cdrom子目录下。 /proc 存放存储进程和系统信息 /root 超级用户的主目录 /sbin 存放系统管理程序 /tmp 存放临时文件的目录 /usr 包含了一般不需要修改的应用程序，命令程序文件、程序库、手册和其它文档。 /var 包含系统产生的经常变化的文件 37：链接命令：ln （1）ln -s [原文件---》软链接，原文件一定要写绝对路径哦！] [目标文件] 命令英文原意：link 功能描述:生成链接文件 参数：-s 创建软链接（soft） （2）硬链接特征： ----》拥有相同的i节点和存储block块，可以看做是同一个文件。 ----》可通过i节点识别 ----》不能跨分区 ----》不能针对目录使用 （3）软链接特征： ----》类似windows快捷方式 ----》软链接拥有自己的I节点和block块，但是数据块中只保存原文件的文件名和i节点号，并没有实际的文件数据 ----》lrwxrwxrwx | 软链接，软链接文件权限都为rwxrwxrwx ----》修改任意文件，另一个都改变 ----》删除原文件，软链接不能使用 38：文件搜索命令： ---->文件搜索命令：locate（搜索速度比较快） （1）使用方法：locate 文件名，在后台数据库中按文件名搜索，搜索速度更快； /var/lib/mlocate ；locate命令所搜索的后台数据库，此数据库不是实施更新的，一天一更新，所以需要手动执行updatedb更新数据库；缺点是只可以按照文件名进行搜索； ---->命令搜索命令whereis 与which （1）使用用法：whereis 命令名；搜索命令所在路径，即linux已有命令，以及帮助文档所在位置； 扩展：whoami 查看用户是谁；whatis 命令查看命令； 参数：-b 只查找可执行文件； -m 只查找帮助文件； （2）使用用法：which命令搜索命令所在路径以及别名； ---->文件搜索命令find（遍历所有的目标，功能强大，耗时。） （1）find [搜索范围] [搜索条件]；例如，find / -name 文件名称 （2）注意：避免大范围搜索，会非常耗费系统资源，find是在系统当中搜索符合条件的文件名，如果需要匹配，使用通配符匹配，通配符是完全匹配； （3）*代表匹配任意内容，？代表匹配任意一个字符，[]代表匹配任意一个中括号内的字符； （4）find /root -iname 文件名称 : 不区分大小写； find /root -user root : 按照所有者搜索； find /root -nouser : 查找没有所有者的文件 （5）find /var/log/ -mtine +10 查找10天前修改的文件； -10代表10天内修改文件，10代表10天当天修改的文件，+10代表10天前修改的文件； atime 文件访问时间（access），ctime改变文件属性（change），mtime修改文件内容（modify）； （6）find . -size 25k查找文件大小是25kb的文件；（ . 代表当前目录） -25k小于25kb的文件，25k等于25k的文件，+25k大于25kb的文件； find . -inum 262422查询i节点是262422的文件； （7）find /etc -size +20k -a -size -50k 代表查询/etc、目录下，大于20kb并且小于50kb的文件； -a 逻辑与（and），两个条件都满足； -o 逻辑或（or），两个条件满足一个即可； （8）find /etc -size +20k -a -size -50k -exec ls -lh {} \ ； 查找/etc/目录下，大于20kb并且小于50kb的文件，并且显示详细信息。 -exec rm -rf {} \ 对搜索结果执行删除操作； ---->字符串搜索命令grep （1）grep [选项] 字符串 文件名 ，在文件当中匹配符合条件的字符串，例如grep -v 字符串 文件名; 参数：-i 忽略大小写，-v排除指定的字符串； ---->find命令与grep命令的区别？ （1）find命令，在系统中搜索符合条件的文件名，如果需要匹配，使用通配符匹配，通配符是完全匹配； （2）grep命令，在文件当中搜索符合条件的字符串，如果需要匹配，使用正则表达式进行匹配，正则表达式是包含匹配； 39：帮助命令： （1）：man命令，获取指定命令的帮助(英文manual) 例如man ls查看ls的帮助； 注意：q键退出man命令；（2）：help命令，命令--help，获取命令选项的帮助；例如，ls --help; 40：压缩命令： 常用的压缩格式：.zip .gz .bz2 .tar.gz .tar.bz2 1：zip格式的压缩和解压缩命令： （1）压缩文件的命令：zip 压缩文件名 原文件； （2）压缩目录的命令：zip -r 压缩文件名 源目录； （3）最常使用的解压缩的命令（解压缩.zip的文件）：unzip 压缩文件； 2：.gz格式压缩 （1）gzip源文件，压缩为.gz格式的压缩文件，源文件会消失； （2）gzip -c 源文件 > 压缩文件，压缩为.gz格式，源文件保留； （3）gzip -r 目录，压缩目录下所有的子文件，但是不能压缩目录； （4）gzip -d 压缩文件，解压缩文件； （5）gunzip 压缩文件，解压缩文件； （6）gunzip -r 目录，解压缩目录； 3：.bz2格式压缩 （1）bzip2 源文件，压缩为.bz2的格式，不保留源文件； （2）bzip2 -k 源文件，压缩之后保留源文件； 注意：bzip2命令不能压缩目录； （3）bzip2 -d 压缩文件，解压缩，-k保留压缩文件； （4）bunzip2 压缩文件，解压缩，-k保留压缩文件； 4：打包命令tar（解决目录不能压缩的方法） （1）tar -cvf 打包文件名 源文件； 参数：-c打包，-v显示过程，-f指定打包后的文件名； （2）解压缩的命令： tar -xvf 打包文件名； 参数：-x 解打包； 5：其实.tar.gz格式是先打包为.tar格式，再压缩为.gz格式； （1）tar -zcvf 压缩包名.tar.gz 源文件； 参数：-z压缩为.tar.gz格式； （2）最常使用的解压缩命令（解压缩.tar格式的文件）：tar -zxvf 压缩包名.tar.gz； 参数：-x解压缩.tar.gz格式； 6：.tar.bz2压缩格式 （1）tar -jcvf 压缩包名.tar.gz2 源文件； 参数：-j压缩为.tar.gz2格式； （2）最常使用的解压缩命令（解压缩.tar格式的文件）：tar -jxvf 压缩包名.tar.gz2； 参数：-x解压缩.tar.gz2格式； 41：linux中关机和重启命令： 1：shutdown命令，使用用法：shutdown [选项] 时间 参数： -c：取消前一个关机命令 -h：关机 -r：重启 用法举例：shutdown -r 05:30 &(凌晨五点关机，并且是后台执行) 2：linux操作系统其他关机命令：halt poweroff init 0 3：linux操作系统的重启命令：reboot; 42：shell是什么？？？ （1）shell是一个命令行解释器，它为用户提供了一个向linux内核发送请求以便运行程序的界面系统级程序，用户可以用shell来启动，挂起，停止，甚至是便携一些程序。 （2）shell还是一个功能相当强大的编程语言，易编写，易调试，灵活性强。shell是解释执行的脚本语言，在shell中可以直接调用linux系统命令； 43：echo输出命令： 1：echo [参数] [输出内容] 参数： -e ： 支持反斜线控制的字符转换； 2：echo可以将内容写到文件里面，如： echo 内容 > 文件名称； 3：echo颜色输出格式：echo -e "\e[1;31m你好啊\e[0m" echo -e "\e[1;32m你好啊\e[0m" echo -e "\e[1;33m你好啊\e[0m"...... 44：linux脚本的好处，可以直接调用linux中shell的命令： 1：shell脚本的第一行#!/bin/bash这一句（表示这个是linux标准脚本,如果是纯shell则不会报错），如果省去这句话，如果调用其他其他语言就会报错； 2：shell脚本里面的#表示注释； 3：书写简单的脚本，如vim hello.sh ,内容如下所示： #!/bin/bash #the first program echo -e "\e[1;31mhello wolrd\e[0m" 保存:wq退出以后，可以进行运行操作；4：运行linux脚本的几种命令： （1）赋予执行权限，直接运行 chmod 755 hello.sh ./hello.sh或者./hello.sh start （2）通过bash调用执行脚本 bash hello.sh （3）sh hello.sh start直接运行也行； 45：Bash的基本功能： 1：命令别名和快捷键 （1）命令别名：alias，举例说明（起别名必须符合别名规范，不然出错）：alias aa='ls -l --color=auto' 删除别名的命令：unalias aa （2）查看系统中所有的命令别名：alias （3）设定命令别名：alias 别名= ‘原命令’ （4）别名永久生效与删除别名：vi ~/.bashrc写入环境变量配置文件，修改过后的文件生效方法：source .bashrc （5）删除别名的命令：unalias 别名 （6）快捷键： 强制终止的快捷键：ctrl+c; 清除屏幕的快捷键：ctrl+l; 光标移动到命令行首：ctrl +a; 光标移动到命令行尾：ctrl+e; 从光标所在位置删除到行首：ctrl+u; 把命令放入后台：ctrl+z; 在历史命令中搜索：ctrl+r; 2：历史命令 （1）history [选项] [历史命令保存文件] 选项：-c清空历史命令; -w把缓存中的历史命令写入历史命令保存文件~/.bash_history; （2）注意：根目录下面，ls -a显示.bash_history文件可以进行查看历史命令; （3）历史命令默认会保存1000条，可以在坏境变量配置文件/etc/profile中进行修改；可以去vim /etc/profile里面修改保存的历史命令的条数； （4）使用上下箭头调用之前的历史命令； （5）命令与文件补全：在Bash中，命令与文件补全是非常方便与常用的功能，我们只要在输入命令或者文件时，按“tab”键就会自动进行补全； 3：输出重定向 （1）：标准输入输出： 键盘，设备文件名/dev/stdin,文件描述符0，类型为标准输入； 显示器，设备文件名/dev/stdout,文件描述符1，类型为标准输出； 显示器，设备文件名/dev/stderr,文件描述符2，类型为标准错误输出； （2）：输出重定向： 标准输出重定向：命令 > 文件 ，以覆盖的方式，把命令的正确输出输出到指定的文件或者设备当中； 命令 >> 文件，以追加的方式，把命令的正确输出输出到指定的文件或者设备中。 标准错误输出重定向：错误命令 2 >文件，以覆盖的方式，把命令的错误输出输出到指定的文件或者设备中。 错误命令 2 >> 文件，以追加的方式，把命令的错误输出输出到指定的文件或者设备中。 4：多命令顺序执行（多命令执行符; && ||） （1）; ---->命令1； 命令2 的作用多个命令顺序执行，命令之间没有任何逻辑联系； （2）&& ---->命令1 && 命令2 的作用是逻辑与，当命令1正确执行，则命令2 才会执行，当命令1执行不正确，则命令2 不会执行； （3）||---->命令1 || 命令2的作用是逻辑与，当命令1执行不正确，则命令2才会执行，当命令1正确执行，则命令2不会执行； （4）管道符，命令格式：命令1 | 命令2的作用是命令1的正确输出作为命令2的操作对象； （5）管道符举例说明：ls -l /etc | more将管道符前面正确执行的输出作为管道符后面的操作对象； 5：通配符 （1）？匹配一个任意字符； （2）*匹配0个或者任意多个任意字符，也就是可以匹配任何内容； （3）[]匹配括号中任意一个字符，例如：[abc]代表一定匹配一个字符，或者是a,或者是b,或者是c； （4）[-]匹配括号中任意一个字符，-代表一个范围，例如[a-z]代表匹配一个小写字母； （5）[^]逻辑非，表示匹配不是中括号内的一个字符，例如：[^0-9]代表匹配一个不是数字的字符； 6：特殊符号 （1）''单引号，在单引号中所有的特殊符号，如"$"个“‘”反引号都没有特殊含义； （2）""双引号，双引号，在双引号中特殊符合都没有特殊含义，但是“$”,"'"和“\”是例外，拥有"调用变量的值","引用命令"和“转义符”的特殊含义； （3）#在shell脚本中，#开头的行代表注释； （4）$用于调用变量的值，如需要调用变量name的值时，需要用$name的方式得到变量的值； （5）\转义符，跟在\之后的特殊符号将失去特殊含义，变为普通字符，如\$将输出"$"符号，而不当作是变量引用； （6）$()和反引号作用一样，用来引用系统命令； （7）''反引号，反引号括起来的内容是系统命令，在Bash中会执行它，和$()作用一样，不过推荐使用$(),因为反引号非常容易看错；
