HBase+Spark技术双周刊第1期-低调大师

HBase+Spark技术双周刊第1期

2018-11-21 928

精彩直播

HBase多模式

HBase多模式，包括分析层：支持复杂分析、算子下推；多模式层：提供各种模型转换，贴切业务；索引引擎：提供索引支持，基于 Lucene ；存储引擎：提供 KV 支持，基于LSM；分布式文件层：保障低成本、与上层分离、共享降低成本。本次直播，阿里云数据架构师明惠就为大家分享HBase多模式。

HBase内核及能力

HBase内核及能力包括：HBase的特性与生态：自动分区、LSM Tree、存储计算分离、HBase生态；全新的HBase2.0版本新功能：小对象存储MOB、读写链路Off-heap 、Region Replica 、In Memory Compaction 、Assignment MangerV2。在本次直播中，阿里巴巴技术专家正研就将为大家分享HBase内核及能力。

中国HBase技术社区第八届MeetUp（南京站） ——HBase应用实践专场【培训视频及资料下载】
2018年11月17号，由中国HBase技术社区、DataFun社区联合氪空间主办的中国第八届HBase Meetup将来到南京，届时来自阿里云、毕马威、苏宁等公司HBase的专家们，将为大家分享HBase的应用实践。

Spark介绍及Spark多数据源分析
开源大数据处理首选Spark，Spark引擎助力数据构架升级，大数据构架分为多种系统，如：流式处理系统、离线分析系统、算法分析系统、交互式分析系统，通过阿里多模型数据库专家沐远的讲解学习Spark并解决各种业务问题。

技术分享

HBase 在人工智能场景的使用

近几年来，人工智能逐渐火热起来，特别是和大数据一起结合使用。人工智能的主要场景又包括图像能力、语音能力、自然语言处理能力和用户画像能力等等。这些场景我们都需要处理海量的数据，处理完的数据一般都需要存储起来，这些数据的特点主要有如下几点：大、稀疏、列动态变化。

HBase2.0重新定义小对象实时存取

小对象，特别指1K~10MB范围的数据，比如图片，短视频，文档等广泛的存在于人工智能，医疗，教育，生活分享，电子商务等领域。HBase 2.0在MOB技术的加持下重新定义小对象实时存取，具有低延迟，读写强一致，检索能力强，水平易扩展等关键能力。本文将以一条SQL展开小对象实时存取的方案演进，介绍不同架构的优缺点。然后提供人工智能和医疗方面两个采用HBase2.0的案例分析。最后总结小对象实时存取的最佳实践。

消灭毛刺！HBase2.0全链路offheap效果拔群

阿里云HBase2.0版本是基于社区2018年发布的HBase2.0.0版本开发的全新版本。在社区HBase2.0.0版本基础上，做了大量的改进和优化，吸收了众多阿里内部成功经验，比社区HBase版本具有更好的稳定性和性能，同时具备了HBase2.0提供的全新能力。HBase2.0提供的新功能介绍可以参照这篇文章。如果想要申请使用全新的HBase2.0版本，可以在此链接申请试用。

技术社群

【HBase生态+Spark社区大群】

群福利：群内每周进行群直播技术分享及问答

加入方式1：

点击link申请加入 https://dwz.cn/Fvqv066s

加入方式2：

钉钉扫码加入：

微信关注我们

原文链接：https://yq.aliyun.com/articles/672573

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

超燃！Apache Flink 全球顶级盛会强势来袭

十五年前，Google的“三驾马车”初登舞台，一时间风头无两，随后出现的Hadoop拉开了开源大数据发展的序幕，如今伴随着数据时效性越来越高，以及人工智能的兴起， Apache Flink（以下简称Flink），这款被普遍认为最有可能成为下一代大数据计算引擎的开源软件，正闪耀着新星的光芒。 Flink具备惊人的潜力，能够帮助企业和开发者在以流为基础的各种计算中获益。它不仅可以真正实现实时数据分析，还可以分析海量历史数据，并且极大地简化数据处理流程。最让人惊喜的是，Flink用同一种底层技术来实现流处理和批处理。它拥有完备的语义和强大的性能，这使得应用程序的开发变得简单，其架构也使得应用程序的维护变得容易。时至今日， Flink的卓越性能发展几何？又多了哪些黑科技？在海内外分别有哪些生产级别的实践？下一步有何规划？一

2018-11-22

704

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.文档编写目的本文档讲述如何通过Hue管理Sentry权限，您将学习到以下知识： 1.如何使用Hue创建用户 2.如何使用Hue为hive用户组授权超级权限 3.如何使用Hue验证授权文档主要分为以下几步： 1.使用Hue创建测试用户 2.授权hive组为管理员 3.创建角色并授权验证 4.备注这篇文档将重点介绍如何使用Hue管理Sentry权限，并基于以下假设： 1.CDH集群运行正常 2.集群已启用Kerberos 3.集群已安装Sentry服务，已和HDFS/Hive/Impala/Hue服务集成以下是本次测试环境，但不是本操作手册的硬限制： 1.操作系统：CentOS 6.5 2.CDH和CM版本为5.12.1 3.采用root用户进行操作 4.Hue的管理员账号为admin 2.在Hue上创建用户通过Hue管理员分别创建用户hive/fayson_d/fayson_a/fayson_c/fayson_h，hive用户所属组为hive组，其它用户所属组也与用户名称一样。注意：确保以上用户在集群所有节点...

2018-11-22

826

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。