基于HBase和Spark构建企业级数据处理平台-低调大师

基于HBase和Spark构建企业级数据处理平台

2019-03-31 651

摘要：在中国HBase技术社区第十届Meetup杭州站上，阿里云数据库技术专家李伟为大家分享了如何基于当下流行的HBase和Spark体系构建企业级数据处理平台，并且针对于一些具体落地场景进行了介绍。

演讲嘉宾简介：李伟（花名：沐远），阿里云数据库技术专家。专注于大数据分布式计算和数据库领域，具有6年分布式开发经验，先后研发Spark及自主研发内存计算，目前为广大公有云用户提供专业的云HBase数据库及计算服务。

以下内容根据演讲视频以及PPT整理而成。

本文分享主要围绕以下四个方面：
当前面临的挑战
平台架构及案例
原理及最佳实践
阿里云HBase X-Pack服务

一、当前面临的挑战
众多场景需求
目前，HBase广泛地应用于各个公司的数据处理平台之中。HBase能够解决的问题主要可分为5类，即金融风控、个性化推荐、社交Feeds、时序时空以及大

微信关注我们

原文链接：https://yq.aliyun.com/articles/696176

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

ZooKeeper分布式架构实战系列(01)：ZooKeeper概念、功能、架构、与使用场景和面试题

ZooKeeper是分布式协调服务，开源分布式架构领域不可或缺的技术组件，使用非常的广泛，我们在一些分布式架构的文章中经常看到。比如常见的Hadoop大数据架构，阿里巴巴的Dubbo分布式架构，Spring Cloud微服务架构等都有涉及。BAT名企面试中也是经常作为考点。重要性不言而喻，作为互联网公司的架构师，不懂ZooKeeper很难过关。今天我们来一起系统学习《ZooKeeper分布式架构实战系列》，包括ZooKeeper概念、功能、架构、与使用场景和面试题，与各种技术组件的搭配使用，部署、运维与开发实战。1、ZooKeeper 名字由来 ZooKeeper 在分布式领域大名鼎鼎，但是很多人不理解为什么叫这个名字。其实却是很痛苦，我自己第一次听说也是很久不理解。这和ZooKeeper 最初诞生的时候的设计目标有关系，Z

2019-03-31

532

摘要：在中国HBase技术社区第十届meetup--HBase生态实践（杭州站）上，阿里云技术专家郭泽晖为大家介绍了云HBase之时序引擎OpenTSDB的介绍及压缩优化，向大家展示了使用OpenTSDB所遇到的一些问题及优化方案，并对云OpenTSDB的集中使用模式进行了相应的介绍。本文根据演讲视频以及PPT整理而成。本文将主要围绕以下四个方面进行分享： OpenTSDB的介绍 OpenTSDB的常见问题 OpenTSDB的压缩优化云OpenTSDB的使用模式本文首先会对OpenTSDB简单介绍，以及使用OpenTSDB时所遇到的常见问题，之后则会重点介绍相对于社区版的OpenTSDB所做的相应改进，最后介绍云OpenTSDB的几种使用模式。一、OpenTSDB的介绍 OpenTSDB是一款基于HBase构建的时序数据库，时序数据具有

2019-04-01

753

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。