当 Elasticsearch 遇上 MaxCompute —— 「Elasticsearch on MaxCompute 」简介-低调大师

当 Elasticsearch 遇上 MaxCompute —— 「Elasticsearch on MaxCompute 」简介

2016-10-10 649

转自haixia

Elasticsearch on MaxCompute(原ODPS）

Elasticsearch 是目前最流行的开源分布式搜索系统之一，它有着优秀的近实时搜索性能和丰富的周边配套工具。以 Elasticsearch 为核心的 Elastic Stack (Elasticsearch + Logstash + Kibana + Beats) 正逐渐成为企业和个人进行数据收集、搜索、分析、可视化的首选解决方案。

作为一个分布式系统，Elasticsearch 在部署使用时会面临一些运维方面的问题：如扩容缩容、failover、集群运维和管理等。对于这些问题，ODPS 已经有了成熟、稳定的解决方案，而 Elasticsearch 的搜索功能一直是 ODPS 的短板——存储在 ODPS 表里的数据难以进行高效的全文检索，但

微信关注我们

原文链接：https://yq.aliyun.com/articles/61528

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

基于 MaxCompute 的极速的基因测序分析

转载自yizhuo 基因、测序、分析基因，生命的基本因素，是人类和其他生物的基础遗传物质。人有 23 对染色体，总共记录了大约 3Gb 个碱基（这里的 b 是 base，即碱基，可不是 bit，参考这里），每个位置上的碱基可能是 ATCG 中的一个。简单理解起来，就是有了这 3Gb 长的字符串，就能克隆一个你。基因测序，就是用化学和物理的方法，把你身体里这 3Gb 字符串检测出来。当然，由于受当前测序技术的限制，我们并不能一次性测得一个完整的 3Gb 字符串，而是无数个 150bp 左右长度的小碎片。把这无数个小碎片重新组合还原成 3Gb 的长字符串的过程，叫全基因组组装。人类基因组计划干的就是这个组装拼图的事情，到了 2003 年，基本上算是拼完了。于是就有了一个标准的 3Gb 人类字符串，业界称其为『人类基因组参考序列』，也常

2016-10-11

719

MaxCompute 2.0 生态开放之路及最新发展

文章转自yizhuo MaxCompute（原ODPS）是阿里云自主研发的分布式大数据处理系统。长久以来，这套阿里自研的系统为阿里内部服务，有自己的类型系统，配套工具以及 SDK 和编程接口。但是随着公共领域对 MaxCompute 的需求越来越强烈，我们也在尽自己所能，使 MaxCompute 能够兼容现有生态，提高使用体验以及最重要的，保护用户投资。用户接口层的基本简介首先整体介绍一下 MaxCompute 的用户接口层。 MaxCompute 从研发的第一天起就被设计统一由 Restful API 提供服务。在 Restful API 之上，我们各种语言的 SDK。由 SDK 编写形成的各种工具、驱动等等构成了 MaxCompute 的用户接口层，即外围生态。协议兼容：JDBC 和 Hive Proxy JDBC 是 MaxCo

2016-10-11

635

资源下载

更多资源

Oracle

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

JDK

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

当 Elasticsearch 遇上 MaxCompute —— 「Elasticsearch on MaxCompute 」简介