基于HBase和Spark构建企业级数据处理平台-低调大师

基于HBase和Spark构建企业级数据处理平台

2019-03-31 641

摘要：在中国HBase技术社区第十届Meetup杭州站上，阿里云数据库技术专家李伟为大家分享了如何基于当下流行的HBase和Spark体系构建企业级数据处理平台，并且针对于一些具体落地场景进行了介绍。

演讲嘉宾简介：李伟（花名：沐远），阿里云数据库技术专家。专注于大数据分布式计算和数据库领域，具有6年分布式开发经验，先后研发Spark及自主研发内存计算，目前为广大公有云用户提供专业的云HBase数据库及计算服务。

以下内容根据演讲视频以及PPT整理而成。

本文分享主要围绕以下四个方面：
当前面临的挑战
平台架构及案例
原理及最佳实践
阿里云HBase X-Pack服务

一、当前面临的挑战
众多场景需求
目前，HBase广泛地应用于各个公司的数据处理平台之中。HBase能够解决的问题主要可分为5类，即金融风控、个性化推荐、社交Feeds、时序时空以及大

微信关注我们

原文链接：https://yq.aliyun.com/articles/696176

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

ZooKeeper分布式架构实战系列(01)：ZooKeeper概念、功能、架构、与使用场景和面试题

ZooKeeper是分布式协调服务，开源分布式架构领域不可或缺的技术组件，使用非常的广泛，我们在一些分布式架构的文章中经常看到。比如常见的Hadoop大数据架构，阿里巴巴的Dubbo分布式架构，Spring Cloud微服务架构等都有涉及。BAT名企面试中也是经常作为考点。重要性不言而喻，作为互联网公司的架构师，不懂ZooKeeper很难过关。今天我们来一起系统学习《ZooKeeper分布式架构实战系列》，包括ZooKeeper概念、功能、架构、与使用场景和面试题，与各种技术组件的搭配使用，部署、运维与开发实战。1、ZooKeeper 名字由来 ZooKeeper 在分布式领域大名鼎鼎，但是很多人不理解为什么叫这个名字。其实却是很痛苦，我自己第一次听说也是很久不理解。这和ZooKeeper 最初诞生的时候的设计目标有关系，Z

2019-03-31

519

摘要：在中国HBase技术社区第十届meetup--HBase生态实践（杭州站）上，阿里云技术专家郭泽晖为大家介绍了云HBase之时序引擎OpenTSDB的介绍及压缩优化，向大家展示了使用OpenTSDB所遇到的一些问题及优化方案，并对云OpenTSDB的集中使用模式进行了相应的介绍。本文根据演讲视频以及PPT整理而成。本文将主要围绕以下四个方面进行分享： OpenTSDB的介绍 OpenTSDB的常见问题 OpenTSDB的压缩优化云OpenTSDB的使用模式本文首先会对OpenTSDB简单介绍，以及使用OpenTSDB时所遇到的常见问题，之后则会重点介绍相对于社区版的OpenTSDB所做的相应改进，最后介绍云OpenTSDB的几种使用模式。一、OpenTSDB的介绍 OpenTSDB是一款基于HBase构建的时序数据库，时序数据具有

2019-04-01

737

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。