云计算读书笔记(三)
亚马逊的云是业界比较领先的云,主要包括弹性计算云EC2,简单存储服务S3,简单数据库服务Simple DB,简单队列服务SQS,弹性MapReduce服务,内容推送服务CloudFront,电子商务服务DevPay和FPS等。
Dynamo以简单的键值存储,不支持复杂的查询
1,数据均衡分布的问题
1)一致性哈希算法 (1)平衡性 (2)单调性 (3)分散性 (4)负载
2)采用的改进算法,引入虚拟结点的概念
3)数据备份
2,数据冲突问题
主要考虑三个因素:可靠性,可用性和一致性
3,容错机制
1)临时故障容错机制
2)永久性故障处理机制
4,成员资格及错误检测
是Amazon云计算环境的基本平台
主要特性:
1)灵活性
2)低成本
3)安全性
4)易用性
5)容错性
EC2的关键技术:
1)弹性块存储
2)地理区域和可用区域
3)EC2的通信机制
4)弹性负载均衡
5)监控服务
6)自动缩放
7)服务管理控制台
s3是amazon推出的简单存储服务
s3是架构在Dynamo之上的
s3存储涉及的几个基本概念:
1)对象 是基本的存储单元,主要由两部分组成:数据和元数据
2)键 键是对象的唯一标识符
3)桶 桶是一个用来存储对象的容器
4)基本操作 基本操作包括:Get,Put,List,Delete和Head
SQS是Amazon为了解决其云平台之间不同组件的通信而专门设计开发的。
SQS由三个基本部分组成:系统组件,队列和消息
Simple DB主要用于存储结构化的数据,并为这些数据提供基本的查找,删除等数据库功能
重要概念:
1)用户账户
2)域
3)条目
4)属性
5)值
RDS是一种云中的MySQL数据库系统,它采用集群的方式将MySQL移植到云中
CloudFront实际上就是一个基于Amazon云计算平台实现的内容分发网络。通过Amazon部署在世界各地的边缘节点,用户可以快速,高效的由CloudFront提供服务的网站进行访问
云内容推送:
1,对象
2,源服务器
3,分发
4,别名指向
5,边缘节点位置
6,有效期
1)快速应用部署Elatic Beanstalk和服务模板CloudFormation
2)云中的DNS服务Router53
3)虚拟私有云VPC
4)简单通知服务SNS和简单邮件服务SES
5)弹性MapReduce服务
6)电子商务服务DevPay,FPS和Simple Pay
7)Amazon执行网络服务
8)土耳其机器人

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
云计算读书笔记(二)
google云计算原理与应用 google云计算服务包括:google文件系统GFS,分布式计算编程模形MapReduce,分布式锁服务Chubby,分布式结构化数据表Bigtable,分布式存储系统Megastore以及分布式监控系统Dapper等。 GFS提供了海量数据的存储和访问能力。 GFS 系统架构: 分为三类角色,client(客户端),Master(主服务器)和Chunk Server(数据块服务器) 1,使用的是中心服务器模块,可以任意添加chunk server. 2,不实现缓存,这是从必要性和可行性两方面考虑。 必要性:客户端大部分是流式读写,不存在大量的重复读写。 可行性:如何维护缓存与实际数据之间一致性是一个极其复杂的问题。加之网络等不确定因素,一致性问题尤为复杂。而且数据量非常大,以当前的内存容量根本无法缓存。 而对于存储在GFS的Master中的数据实现了缓存。 3,在用户状态下实现,正常的文件系统是操作系统的重要组成部分,在内核态实现文件系统可以更好的和操作系统本身结合。 但GFS却选择在用户态下实现,主要基于以下考虑: 1)在用户态下直接利用操作系统提供...
- 下一篇
云计算读书笔记(五)
Hadoop:Google云计算的开源实现 Hadoop是Apache开源组织的一个分布式计算机框架,可以在大量廉价的硬件设备组成的集群上运行应用程序,为应用程序提供一组稳定可靠的接口,旨在构建一个具有高可靠性和良好扩展性的分布式系统。 Hadoop的核心是HDFS,MapReduce和HBase,它们分别对应Google的云计算GFS,MapReduce和Bigtable。 Hadoop主要由以下几个子项目组成: 1)Hadoop Common:原来的Hadoop Core,这是整个Hadoop项目的核心 2)Avro:Hadoop的RPC方案 3)Vhukwa:一个用来管理大型分布式系统的数据采集系统 4)HBase:支持结构化数据存储的分布式数据库,是Bigtable的开源实现 5)HDFS:提供高呑吐量的分布式文件系统,是GFS的开源实现 6)Hive:提供数据摘要和查询功能键的数据仓库 7)MapReduce:大型数据的分布式处理模型 8)Pig:是在MapReduce上构建的一种高级的数据流语言 9)ZooKeeper:用于解决分布式系统中的一致性问题,是Chubby的开源...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS7设置SWAP分区,小内存服务器的救世主
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- 设置Eclipse缩进为4个空格,增强代码规范
- CentOS7安装Docker,走上虚拟化容器引擎之路
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- Hadoop3单机部署,实现最简伪集群
- Linux系统CentOS6、CentOS7手动修改IP地址
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题