【云周刊】第129期：探秘！双11背后的基础设施支撑-低调大师

【云周刊】第129期：探秘！双11背后的基础设施支撑

2017-07-04 569

本期头条

免费下载！业界首部安卓热修复宝典出炉，阿里技术大牛联袂推荐

继《阿里巴巴Java开发手册》后，我们为小伙伴们带来了第二份礼物：业界首部全方位完整介绍热修复原理书籍《深入理解Android热修复技术原理》，该书为阿里巴巴手淘技术团队撰写，现已免费开放下载。《深入探索Android热修复技术原理》从阿里Sophix方案开发过程入手权威解读，分享了阿里巴巴手淘技术团队对系统底层的原创性发现，是业界首部全方位完整介绍热修复原理的书籍。点击查看

微信关注我们

原文链接：https://yq.aliyun.com/articles/117719

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

大数据分析你不能不懂的6个核心技术

目前，大数据领域每年都会涌现出大量新的技术，成为大数据获取、存储、处理分析或可视化的有效手段。大数据技术能够将大规模数据中隐藏的信息和知识挖掘出来，为人类社会经济活动提供依据，提高各个领域的运行效率，甚至整个社会经济的集约化程度。 1大数据生命周期图1展示了一个典型的大数据技术栈。底层是基础设施，涵盖计算资源、内存与存储和网络互联，具体表现为计算节点、集群、机柜和数据中心。在此之上是数据存储和管理，包括文件系统、数据库和类似YARN的资源管理系统。然后是计算处理层，如hadoop、MapReduce和Spark，以及在此之上的各种不同计算范式，如批处理、流处理和图计算等，包括衍生出编程模型的计算模型，如BSP、GAS 等。数据分析和可视化基于计算处理层。分析包括简单的查询分析、流分析以及更复杂的分析(如机器学习、图计算等)。查询分析多基于表结构和关系函数，流分析基于数据、事件流以及简单的统计分析，而复杂分析则基于更复杂的数据结构与方法，如图、矩阵、迭代计算和线性代数。一般意义的可视化是对分析结果的展示。但是通过交互式可视化，还可以探索性地提问，使分析获得新的线索，形成迭代的分析和可视...

2017-07-05

394

客户问题场景如上图所示，用户业务服务器(ApplicationServer)上面发起HTTP GET/PUT请求，经过SLB到达后端服务器(HBase-Rest-Server), 一般请求链路耗时大概100ms左右，但是会有一定的概率出现耗时很长(超过3s)。问题排查 1. 抓包分析通过在HBase-REST-Server上面抓包，发现有SYN重传，引起SYN重传的原因是上图所示的Queue满了，导致新请求的SYN包丢弃。 Linux的SYN重传通过net.ipv4.tcp_syn_retries参数控制重传次数，每次重传的时间间隔为(第一次3s,第二次6s,第三次12s,每增加一次时间间隔翻倍),所以当SYN包被丢弃后，第一次会经过3s后进行重传，这个3s也跟上述的超时3s比较吻合。 2. 参数调整从上面可以看出Queue满导致重传，

2017-07-05

517

资源下载

更多资源

Oracle

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Apache Tomcat

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

JDK

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。