低调大师

显示筛选

文章筛选

  • 全部文章
  • 龙果学院
  • CentosChina
  • 低调大师
  • SpringBoot
  • 框架
  • 数据库
  • Linux
  • 大数据
  • 开发工具
  • 大师作品
  • 管理工具
  • 服务器
  • 文章摘抄
  • 面试锦集
  • 消息队列
  • 51CTO
  • 推荐
  • 云计算
  • 大数据
  • 移动
  • 网络
  • 安全
  • 系统
  • 开发
  • 服务器
  • 存储
  • 数据库
  • 虚拟化
  • 云栖社区
  • 云计算
  • 大数据
  • 人工智能
  • 架构
  • 移动开发
  • 物联网
  • 编程语言
  • 阿里云
  • OsChina
  • 博客
  • 软件更新资讯
  • 行业资讯
  • 编程语言资讯
  • 综合资讯
您现在的位置是:首页>文章列表

文章列表

  • 专访阿里王峰:Hadoop生态下一代计算引擎-streaming和batch的统一

    专访阿里王峰:Hadoop生态下一代计算引擎-streaming和batch的统一

    编者按:Hadoop于2006年1月28日诞生,至今已有10年,它改变了企业对数据的存储、处理和分析的过程,加速了大数据的发展,形成了自己的极其火爆的技术生态圈,并受到非常广泛的应用。在2016年Hadoop十岁生日之际,InfoQ策划了一个Hadoop热点系列文章,为大家梳理Hadoop这十年的变化,技术圈的生态状况。本次InfoQ便采访了阿里搜索离线基础...

    2016-02-16 7热度
  • Spark源码分析之四:Stage提交

    Spark源码分析之四:Stage提交

    各位看官,上一篇《Spark源码分析之Stage划分》详细讲述了Spark中Stage的划分,下面,我们进入第三个阶段--Stage提交。 Stage提交阶段的主要目的就一个,就是将每个Stage生成一组Task,即TaskSet,其处理流程如下图所示: 与Stage划分阶段一样,我们还是从handleJobSubmitted()方法入手,在S...

    2016-02-16 9热度
  • Spark源码分析之二:Job的调度模型与运行反馈

    Spark源码分析之二:Job的调度模型与运行反馈

    在《Spark源码分析之Job提交运行总流程概述》一文中,我们提到了,Job提交与运行的第一阶段Stage划分与提交,可以分为三个阶段: 1、Job的调度模型与运行反馈; 2、Stage划分; 3、Stage提交:对应TaskSet的生成。 今天,我们就结合源码来分析下第一个小阶段:Job的调度模型与运行反馈。 首先由DAGSc...

    2016-02-15 7热度
  • 云上游戏数据分析实践

    云上游戏数据分析实践

    作者:上海驻云高级架构师 李俊涛 从游戏发展的角度来看,不管是端游、页游,还是现在发展迅猛的手游,其生命周期与盈利情况都与数据分析能力息息相关。同时数据分析对游戏的运维也起到了至关重要的作用。精确的数据分析有助于在做游戏运营时推出合理的新手引导,在及时的渠道推广和丰富的消费场景设计,这些将极大地影响游戏玩家对游戏的关注度,从而延长游戏的生命周期,并从中更好盈...

    2016-02-15 12热度
  • 2016 大数据版图

    2016 大数据版图

    原文是 FirstMark Capital 的 Matt Turck 的文章。本文全面总结了大数据领域的发展态势,分析认为尽管大数据作为一个术语似乎已经过气,但是大数据分析与应用才刚刚开始兴起,在与 AI、人工智能等新兴技术的结合下,大数据的机会也许要比大家想象的还要大。 在喜新厌旧的技术初创企业界,已有 3年 历史 “大数据” 听起来似乎已经过气了。虽然 ...

    2016-02-15 16热度
  • 批量部署Hadoop集群环境(1)

    批量部署Hadoop集群环境(1)

    批量部署Hadoop集群环境(1) 1. 项目简介: 前言:云火的一塌糊涂,加上自大二就跟随一位教授做大数据项目,所以很早就产生了兴趣,随着知识的积累,虚拟机已经不能满足了,这次在服务器上以生产环境来部署Hadoop。已经搭建完毕,分享出来供大家参考。 问题:看到Hadoop部署在一些资料上很是繁琐,一些简单的部署方法只是玩具,无法满足企业的部署条件,如果一...

    2016-02-15 52热度
  • Hive 1.2.1&Spark&Sqoop安装指南

    Hive 1.2.1&Spark&Sqoop安装指南

    Hive 1.2.1&Spark&Sqoop安装指南.pdf 目录 目录 1 1.前言 1 2.约定 2 3.服务端口 2 4.安装MySQL 2 4.1.安装MySQL 2 4.2.创建Hive元数据库 4 5.安装步骤 5 5.1.下载Hive1.2.1二进制安装包 5 5.2.安装Hive 5 5.3.安装MySQL-Connector...

    2016-02-15 7热度
  • Hive 1.2.1&Spark&Sqoop安装指南

    Hive 1.2.1&Spark&Sqoop安装指南

    目录 目录 1 1.前言 1 2.约定 2 3.服务端口 2 4.安装MySQL 2 4.1.安装MySQL 2 4.2.创建Hive元数据库 4 5.安装步骤 5 5.1.下载Hive1.2.1二进制安装包 5 5.2.安装Hive 5 5.3.安装MySQL-Connector 5 5.4.修改配置 5 5.4.1.修改/etc/profile或~/.p...

    2016-02-15 14热度
  • 关于hive数据导入方式的总结

    关于hive数据导入方式的总结

    从本地导入数据到hive: loaddatalocalinpath'/home/hive/tb_dw_cu_three_type_list_dtal/*.dat'overwriteintotablecsap.tb_dw_cu_three_type_list_dtalpartition(statis_date=20160121); 从HDFS直接导入数据到hi...

    2016-02-15 11热度
  • Spark源码分析之三:Stage划分

    Spark源码分析之三:Stage划分

    继上篇《Spark源码分析之Job的调度模型与运行反馈》之后,我们继续来看第二阶段--Stage划分。 Stage划分的大体流程如下图所示: 前面提到,对于JobSubmitted事件,我们通过调用DAGScheduler的handleJobSubmitted()方法来处理。那么我们先来看下代码: // 处理Job提交的函数 private[s...

    2016-02-15 43热度
  • PyOdps在交互式环境下的使用,让探索ODPS数据更容易些

    PyOdps在交互式环境下的使用,让探索ODPS数据更容易些

    春节结束了,是时候来些新鲜玩意,让我们来看一些酷的东西。 当当当当:隆重推出PyOdps logo。 好像跑题了,好吧,让我们言归正传。 我们知道Python提供了一个交互式的环境,能够方便探索和试验想法。同时,IPython是Python交互环境的增强,提供了很多强大的功能;IPython Notebook(现在已经是Jupyter Notebook)则更...

    2016-02-15 18热度
  • 华为AnyOffice 2015 HTML5 大赛,可以免费申请ECS机器3个月

    华为AnyOffice 2015 HTML5 大赛,可以免费申请ECS机器3个月

    前100名免费申请服务器 吐槽下,虽然名字有个 2015 ,但活动从2016年1月才开始的。 本次申领云资源仅限AnyOffice 2015 HTML5 移动应用开发大赛前一百名报名参赛的开发者,申请者需要注册华为企业云账号,用于发放云资源。 每位通过审核的参赛者限申领2C/4GB/100GB数据盘/2Mb带宽的云服务器一台或云应用引擎容器一个,审核通过后三...

    2016-02-14 8热度
  • Hadoop十岁!Doug Cutting成长史+他眼中大数据技术的未来

    Hadoop十岁!Doug Cutting成长史+他眼中大数据技术的未来

    上次见到(膜拜)Hadoop之父Doug Cutting是在2年前,2014中国大数据技术大会上。今年Hadoop10岁,刚看到他的Hadoop十周年贺词,感觉时间飞逝。最近CSDN和InfoQ都在制作Hadoop选题。云栖社区也找到不少阿里Hadoop生态高手,2-3月会做多场实时在线培训。大家想听什么,告诉我们。 Doug Cutting成长史 2013...

    2016-02-14 8热度
  • 大数据技能修炼的个人道场

    大数据技能修炼的个人道场

    版权声明:本文为半吊子子全栈工匠(wireless_com,同公众号)原创文章,未经允许不得转载。 https://blog.csdn.net/wireless_com/article/details/50663978 大数据技术火热而且火爆,学习大数据的课程和资料也泛滥如潮,而大数据研发环境又不是随便就可以搭建起来的,如何有一个自己随时可用的大数据修炼道场...

    2016-02-13 22热度
  • Spark源码分析之一:Job提交运行总流程概述

    Spark源码分析之一:Job提交运行总流程概述

    Spark是一个基于内存的分布式计算框架,运行在其上的应用程序,按照Action被划分为一个个Job,而Job提交运行的总流程,大致分为两个阶段: 1、Stage划分与提交 (1)Job按照RDD之间的依赖关系是否为宽依赖,由DAGScheduler划分为一个个Stage,并将每个Stage提交给TaskScheduler; (2)S...

    2016-02-13 21热度
  • Docker —— 用于统一开发和部署的轻量级 Linux 容器【转】

    Docker —— 用于统一开发和部署的轻量级 Linux 容器【转】

    转自:http://www.oschina.net/translate/docker-lightweight-linux-containers-consistent-development-and-deployment 英文原文:Docker: Lightweight Linux Containers for Consistent Development a...

    2016-02-12 11热度
  • 用Docker运行Percona Server

    用Docker运行Percona Server

    版权声明:本文为博主chszs的原创文章,未经博主允许不得转载。 https://blog.csdn.net/chszs/article/details/50658687 用Docker运行Percona Server 作者:chszs,未经博主允许不得转载。经许可的转载需注明作者和博客主页:http://blog.csdn.net/chszs Percon...

    2016-02-12 9热度
  • 理解Docker容器的进程管理

    理解Docker容器的进程管理

    Docker在进程管理上有一些特殊之处,如果不注意这些细节中的魔鬼就会带来一些隐患。另外Docker鼓励“一个容器一个进程(one process per container)”的方式。这种方式非常适合以单进程为主的微服务架构的应用。然而由于一些传统的应用是由若干紧耦合的多个进程构成的,这些进程难以拆分到不同的容器中,所以在单个容器内运行多个进程便成了一种折...

    2016-02-12 19热度
  • 知乎上有一个问题“在mfc框架中,有上面方法能直接将opencv2.0库中的Mat格式图片传递到Picture Control”中显示?

    知乎上有一个问题“在mfc框架中,有上面方法能直接将opencv2.0库中的Mat格式图片传递到Picture Control”中显示?

    一直以来,我使用的方法都是shiqiyu在opencvchina上面提供的引入directshow,并且采用cvvimage和cameraDs的方法。这个方法虽然在xp/win7/win8下面都能够成果使用,但是一直以来我都没有动机去深入看一看这个方法。这次在知乎上面看到 jie wu 提出的“将Opencv窗口添加到PictureControl”中的方法,...

    2016-02-12 9热度
  • Docker多主机网络通信详解

    Docker多主机网络通信详解

    版权声明:本文为博主chszs的原创文章,未经博主允许不得转载。 https://blog.csdn.net/chszs/article/details/50654740 Docker多主机网络通信详解 作者:chszs,未经博主允许不得转载。经许可的转载需注明作者和博客主页:http://blog.csdn.net/chszs Docker支持多主机网络通...

    2016-02-11 9热度
« 上页 5190/5295 下页 »