Apache Spark 系列技术直播 - Spark SQL 实践与优化

2018-11-22 785

直播回看点我

Apache Spark 系列技术直播

Spark SQL 实践与优化

内容简介：

SparkSQL介绍
- 基本原理
- 支持的DataSource介绍
- Hue/Zepplin/Livy周边跟SparkSQL的集成使用等
SparkSQL优化
- SparkSQL Catalyst优化
- AE优化
- Shuffle优化

直播时间： 2018.11.27 周二晚 19：00 - 20：00

欢迎加入钉钉收看直播

入群方式：

微信关注我们

原文链接：https://yq.aliyun.com/articles/672655

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

0039-如何使用Python Impyla客户端连接Hive和Impala

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.文档编写目的继上一章讲述如何在CDH集群安装Anaconda&搭建Python私有源后，本章节主要讲述如何使用Pyton Impyla客户端连接CDH集群的HiveServer2和Impala Daemon，并进行SQL操作。内容概述 1.依赖包安装 2.代码编写 3.代码测试测试环境 1.CM和CDH版本为5.11.2 2.RedHat7.2 前置条件 1.CDH集群环境正常运行 2.Anaconda已安装并配置环境变量 3.pip工具能够正常安装Python包 4.Python版本2.6+ or 3.3+ 5.非安全集群环境 2.Impyla依赖包安装 Impyla所依赖的Python包 six bit_array thrift (on Python 2.x) orthriftpy (on Python 3.x) thrift_sasl sasl 1.首先安装Impyla依赖的Python包 [root@ip-172-31-22-86 ~]# pip install bit_array [root@i...

2018-11-22

657

精彩视频 HBase多模式HBase多模式，包括分析层：支持复杂分析、算子下推；多模式层：提供各种模型转换，贴切业务；索引引擎：提供索引支持，基于 Lucene ；存储引擎：提供 KV 支持，基于LSM；分布式文件层：保障低成本、与上层分离、共享降低成本。本次直播，阿里云数据架构师明惠就为大家分享HBase多模式。 HBase内核及能力HBase内核及能力包括：HBase的特性与生态：自动分区、LSM Tree、存储计算分离、HBase生态；全新的HBase2.0版本新功能：小对象存储MOB、读写链路Off-heap 、Region Replica 、In Memory Compaction 、Assignment MangerV2。在本次直播中，阿里巴巴技术专家正研就将为大家分享HBase内核及能力。中国HBase技术社区第八届MeetUp（南京站） ——HBase应用实践专场【培训视频及资料下载】2018年11月17号，由中国HBase技术社区、DataFun社区联合氪空间主办的中国第八届HBase Meetup将来到南京，届时来自阿里云、毕马威、苏宁等公司HBase的专家们...

2018-11-23

633

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。