首页 文章 精选 留言 我的

精选列表

搜索[hadoop],共8437篇文章
优秀的个人博客,低调大师

Hadoop集群(第10期副刊)_常用MySQL数据库命令

1、系统管理 1.1 连接MySQL 格式: mysql -h主机地址 -u用户名 -p用户密码 举例: 例1:连接到本机上的MySQL。 首先在打开DOS窗口,然后进入目录 mysqlbin,再键入命令"mysql –u root –p",回车后提示你输密码,如果刚安装好MySQL,超级用户"root"是没有密码的,故直接回车即可进入到MySQL中了,MySQL的提示符是: mysql>。 例2:连接到远程主机上的MYSQL。假设远程主机的IP为:110.110.110.110,用户名为root,密码为abcd123。则键入以下命令: mysql -h 110.110.110.110 -u root –p abcd123 备注:u与root可以不用加空格,其它也一样。 退出MySQL命令:exit(回车)。 1.2 修改新密码 格式:mysqladmin -u用户名 -p旧密码 password 新密码 举例: 例1:给root加个密码ab12。首先在DOS下进入目录mysqlbin,然后键入以下命令: mysqladmin -u root -password ab12 备注:因为开始时root没有密码,所以-p旧密码一项就可以省略了。 例2:再将root的密码改为djg345。 mysqladmin -u root -p ab12 password djg345 1.3 增加新用户 备注:和上面不同,下面的因为是MySQL环境中的命令,所以后面都带一个分号";"作为命令结束符。 格式:grant select on 数据库.* to 用户名@登录主机 identified by '密码' 举例: 例1:增加一个用户test1密码为abc,让他可以在任何主机上登录,并对所有数据库有查询、插入、修改、删除的权限。首先用以root用户连入MySQL,然后键入以下命令: grant select,insert,update,delete on *.* to test2@localhost identified by 'abc'; 或者 grant all privileges on *.* to test2@localhost identified by 'abc'; 然后刷新权限设置。 flush privileges; 例2:如果你不想test2有密码操作数据库"mydb"里的数据表,可以再打一个命令将密码消掉。 grant select,insert,update,delete onmydb.*to test2@localhost identified by ''; 1.4 启动停止MySQL 1)Windows环境下 首先进入DOS环境,然后进行下面操作。 启动服务 net start mysql 停止服务 net stop mysql 2)Linux环境下 启动服务 service mysql start 停止服务 service mysql stop 2、数据库操作 2.1 库操作 1)创建数据库 命令:create database <数据库名> 例如:建立一个名为xhkdb的数据库 mysql> create database xhkdb; 2)显示所有的数据库 命令:show databases (注意:最后有个s) mysql> show databases; 3)删除数据库 命令:drop database <数据库名> 例如:删除名为 xhkdb的数据库 mysql> drop database xhkdb; 4)连接数据库 命令: use <数据库名> 例如:如果xhkdb数据库存在,尝试存取它 mysql> use xhkdb; 屏幕提示:Database changed 5)查看当前使用的数据库 mysql> select database(); 6)当前数据库包含的表信息 mysql> show tables; (注意:最后有个s) 2.2 表操作 备注:操作之前使用"use <数据库名>"应连接某个数据库。 1)建表 命令:create table <表名> ( <字段名1> <类型1> [,..<字段名n> <类型n>]); mysql> create table MyClass( > id int(4) not null primary key auto_increment, > name char(20) not null, > sex int(4) not null default '0', > degree double(16,2)); 2)获取表结构 命令: desc 表名,或者show columns from 表名 mysql>DESCRIBE MyClass mysql> desc MyClass; mysql> show columns from MyClass; 3)删除表 命令:drop table <表名> 例如:删除表名为 MyClass 的表 mysql> drop table MyClass; 4)插入数据 命令:insert into <表名> [( <字段名1>[,..<字段名n > ])] values ( 值1 )[, ( 值n )] 例如:往表 MyClass中插入二条记录,这二条记录表示:编号为1的名为Tom的成绩为96.45,编号为2 的名为Joan 的成绩为82.99,编号为3 的名为Wang 的成绩为96.5。 mysql> insert into MyClass values(1,'Tom',96.45),(2,'Joan',82.99), (2,'Wang', 96.59); 5)查询表中的数据 查询所有行 命令: select <字段1,字段2,...> from < 表名 > where < 表达式 > 例如:查看表 MyClass 中所有数据 mysql> select * from MyClass; 查询前几行数据 例如:查看表 MyClass 中前2行数据 mysql> select * from MyClass order by id limit 0,2; 或者 mysql> select * from MyClass limit 0,2; 6)删除表中数据 命令:delete from 表名 where 表达式 例如:删除表 MyClass中编号为1 的记录 mysql> delete from MyClass where id=1; 7)修改表中数据 命令:update 表名 set 字段=新值,… where 条件 mysql> update MyClass set name='Mary' where id=1; 8)在表中增加字段 命令:alter table 表名 add字段 类型 其他; 例如:在表MyClass中添加了一个字段passtest,类型为int(4),默认值为0 mysql> alter table MyClass add passtest int(4) default '0' 9)更改表名 命令:rename table 原表名 to 新表名; 例如:在表MyClass名字更改为YouClass mysql> rename table MyClass to YouClass; 10)更新字段内容 命令:update 表名 set 字段名 = 新内容 update 表名 set 字段名 = replace(字段名,'旧内容','新内容'); 例如:文章前面加入4个空格 update article set content=concat(' ',content); 3、数据库导入导出 3.1 从数据库导出数据库文件 使用"mysqldump"命令 首先进入DOS界面,然后进行下面操作。 1)导出所有数据库 格式:mysqldump -u [数据库用户名] -p -A>[备份文件的保存路径] 2)导出数据和数据结构 格式:mysqldump -u [数据库用户名] -p [要备份的数据库名称]>[备份文件的保存路径] 举例: 例1:将数据库mydb导出到e:\MySQL\mydb.sql文件中。 打开开始à运行à输入"cmd",进入命令行模式。 c:\> mysqldump -h localhost -u root -p mydb >e:\MySQL\mydb.sql 然后输入密码,等待一会导出就成功了,可以到目标文件中检查是否成功。 例2:将数据库mydb中的mytable导出到e:\MySQL\mytable.sql文件中。 c:\> mysqldump -h localhost -u root -p mydb mytable>e:\MySQL\mytable.sql 例3:将数据库mydb的结构导出到e:\MySQL\mydb_stru.sql文件中。 c:\> mysqldump -h localhost -u root -p mydb --add-drop-table >e:\MySQL\mydb_stru.sql 备注:-h localhost可以省略,其一般在虚拟主机上用。 3)只导出数据不导出数据结构 格式:mysqldump -u [数据库用户名] -p -t [要备份的数据库名称]>[备份文件的保存路径] 4)导出数据库中的Events 格式:mysqldump -u [数据库用户名] -p -E [数据库用户名]>[备份文件的保存路径] 5)导出数据库中的存储过程和函数 格式:mysqldump -u [数据库用户名] -p -R [数据库用户名]>[备份文件的保存路径] 3.2 从外部文件导入数据库中 1)使用"source"命令 首先进入"mysql"命令控制台,然后创建数据库,然后使用该数据库。最后执行下面操作。 mysql>source [备份文件的保存路径] 2)使用"<"符号 首先进入"mysql"命令控制台,然后创建数据库,然后退出MySQL,进入DOS界面。最后执行下面操作。 mysql -u root –p < [备份文件的保存路径] 文章下载地址:http://files.cnblogs.com/xia520pi/HadoopCluster_Vol.10S.rar 如果,您认为阅读这篇博客让您有些收获,不妨点击一下右下角的【推荐】。 如果,您希望更容易地发现我的新博客,不妨点击一下左下角的【关注我】。 如果,您对我的博客所讲述的内容有兴趣,请继续关注我的后续博客,我是【虾皮csAxp】。 本文版权归作者和博客园共有,欢迎转载,但未经作者同意必须保留此段声明,且在文章页面明显位置给出原文连接,否则保留追究法律责任的权利。 本文转自虾皮博客园博客,原文链接:http://www.cnblogs.com/xia520pi/archive/2012/06/18/2553708.html

优秀的个人博客,低调大师

Hadoop分布式文件系统模拟桩HDFS_MOCK

简介 Hdfs_mock属于单测工具,如果c/c++模块以API方式访问hdfs(相对于脚本模块会使用客户端方式),那么有了hdfs_mock就可以在没有真实hdfs情况下,协助进行手工或自动化测试。背景在linkcache模块单元测试(持续集成)时,遇到了一个问题:该模块会以API方式进行hdfs上文件的增删改查等操作,先不说搭建hdfs是一件费时费力得不尝试的事情,即使在单测阶段能够采用搭建真实环境进行测试,仍然存在以下弊端: • 异常测试:hdfs异常情况难于模拟,导致测试覆盖不全面 • 执行时间:访问真实hdfs,自动化测试执行时间难以保证,给快速持续集成带来挑战 • 环境维护:为了支持持久、频繁的持续集成测试,hdfs环境需要始终维持不能变动 • 环境独立:hdfs环境需要与其他测试模块隔离,才能避免相互影响思路分析模块执行过程后发现,c/c++模块在使用API访问hdfs时,采用共享对象so的方式实现。编译时包含标准hdfs.h头文件,运行时查找libhdfs.so中API的实现来完成hdfs访问过程。基于以上分析,设计开发了单测工具hdfs_mock用以替代libhdfs.so,其具有以下特点: • 异常测试:支持从外部设置hdfs内部状态,能够构造各种异常情况进行测试 • 执行时间:内部以本地文件系统方式实现,无网络通信代价,执行速度快 • 环境维护:因为mock so动态加载,所以使用方面直接拷贝本so即可,易于使用维护 • 环境独立:本地按照hdfs主机名分子目录独立维护数据,彼此间不受影响 • 其他:支持标准hdfs API(linkcache使用的10个API函数)设计在没有使用hdfs_mock时的测试过程如下图所示: apache提供的标准hdfs API包含hdfs.h和hdfs.c,编译后生成libhdfs.so。 rd开发linkcache部分代码(HdfsFile.h/HdfsFile.cpp)依赖需要include hdfs.h,在libhdfs.so存在时编译生成libfile.so;运行时以动态方式加载并调用执行libhdfs.so中的代码,输出结果result qa开发测试代码test_HdfsFile.cpp依赖rd代码,在libfile.so存在时编译生成test_HdfsFile程序,执行该测试程序时,同样以动态方式加载并调用执行libfile.so中代码,根据测试结果输出测试报告Test result • hdfsmock_old.JPG: 在使用hdfs_mock后的测试过程如下图所示: 设计开发了hdfs_mock(hdfs_mock.h/hdfs_mock.cpp),include了apache标准hdfs.h以使得接口报纸一致,编译后生成libhdfs.so(图中黄色方框)。其余步骤不变,唯一区别在于,测试执行时,libfile.so所动态加载并调用执行的hdfs API改成了hdfs_mock中的实现了。在hdfs_mock中使用本地文件系统访问替代了hdfs访问以达到模拟API的效果;此外在运行时,也可根据需要在test_HdfsFile中直接调用mock的libhdfs.so中方法来达到设置测试环境(状态、数据)的目的。 • hdfsmock.JPG: 使用方式下面是一个简单使用的例子,配置hdfs为正常状态,然后调用被测函数HDFSSystem::Init链接hdfs成功 QA_TEST_HDFS_MOCK::QA_TEST_HDFS_MOCK* mock = QA_TEST_HDFS_MOCK::getInstance(); mock->resetStat(); mock->_M_stat = QS_TEST_HDFS_STAT_OK; ASSERT_TRUE(HDFSSystem::Init("yx-namenode-v.yx01.baidu.com",64310,"anchorchecker","**")); 下面的简单跟上例是一组,只是配置hdfs为异常状态,然后调用被测函数HDFSSystem::Init链接hdfs失败 QA_TEST_HDFS_MOCK::QA_TEST_HDFS_MOCK* mock = QA_TEST_HDFS_MOCK::getInstance(); mock->resetStat(); mock->_M_stat = QS_TEST_HDFS_STAT_SHUTDOWN; ASSERT_FALSE(HDFSSystem::Init("yx-namenode-v.yx01.baidu.com",64310,"anchorchecker","**")); 下面是稍微复杂一点的例子,首先调用hdfs_mock的createHdfsFile接口,在hdfs_mock上模拟建立testfile文件,内容为给定buf开始的NUM个字节,然后构造HdfsFile对象Open打开testfile文件,最后是调用被测函数hf->Read()读取文件内容与标准数据进行比较 // 构造测试环境 uint32_t NUM = 1024U; char* buf = createNumChar(NUM); QA_TEST_HDFS_MOCK::QA_TEST_HDFS_MOCK* mock = QA_TEST_HDFS_MOCK::getInstance(); mock->createHdfsFile("db-testing-ps7002.db01", "./home/spider/testdir/testfile", buf, NUM); // hdfs_mock提供的辅助接口 // 构造被测对象 const string fp("hdfs@db-testing-ps7002.db01/home/spider/testdir/testfile"); HdfsFile* hf = new HdfsFile(fp); hf->Open(O_RDONLY); // 调用被测函数 char rcvBuf[4096]; ASSERT_EQ((ssize_t)NUM, hf->Read(rcvBuf, 4096)); // 测试结果检查 ASSERT_STREQ(buf, rcvBuf); (作者:shaanlan) 【 本文首发于: 百度测试技术空间】 http://hi.baidu.com/baiduqa/blog/item/5bfab4153a6aa7184b90a76f.html 【 关注百度技术沙龙】 本文转自百度技术51CTO博客,原文链接:http://blog.51cto.com/baidutech/743335,如需转载请自行联系原作者

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring

Spring框架(Spring Framework)是由Rod Johnson于2002年提出的开源Java企业级应用框架,旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念,提供核心容器、应用上下文、数据访问集成等模块,支持整合Hibernate、Struts等第三方框架,其适用范围不仅限于服务器端开发,绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

用户登录
用户注册