阿里云 DataLakeAnalytics 团队招人啦!-低调大师

阿里云 DataLakeAnalytics 团队招人啦!

2018-09-03 580

团队介绍

我们是阿里巴巴集团数据库事业部的OLAP 平台团队，我们专注于提供全球领先的全栈式大规模OLAP产品，目前在阿里集团、公共云、专有云提供了分析型数据库AnalyticDB、时间序列数据库HiTSDB, 数据湖分析引擎: DataLakeAnalytics 等多个产品，得到了大规模应用。每天数据写入记录数在万亿级，查询请求十亿级。

岗位描述

在Data Lake Analytics团队，如果你追求技术，你是幸运的，因为在这里，你接触的面很广，云计算的各层技术，从IaaS、PaaS、DBasS、SaaS到FaaS，从网络、存储、计算到虚拟化，或用、或优化、或设计、或开发，你不会out！数据库的多个方面，从JDBC protocol、SQL parser、optimizer、MPP runtime execution到meta st

微信关注我们

原文链接：https://yq.aliyun.com/articles/634372

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Compression压缩

压缩所带来的好处，磁盘、IO，都来带来很多好处，同时也有很多的弊端。查看自己的hadoop机器是否支持压缩命令 ./hadoop checknatice 如果压缩格式后面全是false，说明Hadoop是没有编译过的。生产环境经常用的集中压缩 gzip 、 bzip2 、LZO、Snappy 先来看下他们之间的区别，主要体现在压缩比率、压缩与解压速度、是否支持分割等方面 Format extention 压缩比到是否支持分割 Gzip .gz 40% NO Bzip2 .bz2 30% yes LZO .lzo 50% yes if indexed（前提是有索引） Snappy .snappy 50% NO 而对于我们刚刚说的速度问题，压缩比越高，压缩速度就越慢，成反比，这里就不在列图了。下面来看下为什么要看是否支持分割呢，我们知道不管是mapreduce还是spark都会有map和reduce还有shuffer的过程，假如一个1G的文件使用Gzip压缩后，大概是400M左右，执行mapre...

2018-09-03

657

曾经读过Erudika/para的源码，此源码托管在github,大致是2014年前后开源的云计算通用后端框架，基于spring boot体系，原生集成持久化（默认H2 DB，通过配置方式实现MongoDB、mysql等常用关系数据库的支持）、缓存（默认Caffeine、支持配置参数的Hazelcast、redis等）和搜索（默认Lucene，支持配置参数的Elasticsearch）三大功能，快速开发resful风格的API接口，其强大的分层思想和通用性设计能力，让我的架构思维有了很大的进步，其开源版本对于中小团队实践spring boot+spring cloud打通云计算服务具有借鉴意义，目前最新的版本为1.29.1。下面，我就简单的分享Erudika/para源码官网的介绍，解释不到位的地方希望大家批评指正，同时，这款较为优秀的开源项目也推荐给大家去学习和使用。特性：多租户技术【多重租赁技术】支持——每个应用程序都有自己的表、索引和缓存; 用Amazon的签名算法进行安全的JSON; 数据库动态性，专为可伸缩和分布式数据存储而设计全文搜索（Elasticsearch）...

2018-09-04

532

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。