搜索[hadoop]结果-低调大师优秀个人博客

精选列表

搜索[hadoop]，共8441篇文章

Hive数据导入——数据存储在Hadoop分布式文件系统中，往Hive表里面导入数据只是简单的将数据移动到表所在的目录中！

转自：http://blog.csdn.net/lifuxiangcaohui/article/details/40588929 Hive是基于Hadoop分布式文件系统的，它的数据存储在Hadoop分布式文件系统中

2017-11-14

Hadoop 这样业界顶级的大规模数据处理平台，均发现满足不了类似双十一这样全世界的剁手党蜂拥而至的热情

写这篇文之前想起一个段子：“你在干嘛？”“我在王健林这儿跟马云谈生意。”“说人话！”“我在万达广场逛无聊了坐着拿手机淘宝……” 所以，本来开篇想说上周到马云那里聊了会最新的云计算技术，想想还是不那么得瑟，老实交代吧，上周五到杭州阿里巴巴总部以开小规模研讨会的名义实质上主要是去参观学习了一圈。马云当然是没见着，据说马老师刚好到武汉去了，当然大家都心里有数，马老师就算刚好没去武汉估计也会刚好有什么其它事情无暇分身滴。出席研讨的阿里方最高级别干部是阿里云副总裁金戈先生，聊得最多的是出自NUDT的同门小师弟，现为阿里云业务架构师的潘旻喆。说说本次阿里之行最大的感受，就是阿里搞接待的妹子都特么漂亮，阿里真正最强大的技术其实并不在于淘宝、天猫又或是支付宝，而是云计算。话说云计算这个概念已经火了好几年了，但是如何跟业外人士解释清楚仍然是个问题。今

2017-05-30

Hive数据分析——Spark是一种基于rdd（弹性数据集）的内存分布式并行处理框架，比于Hadoop将大量的中间结果写入HDFS，Spar...

转自：http://blog.csdn.net/wh_springer/article/details/51842496 近十年来，随着Hadoop生态系统的不断完善，Hadoop早已成为大数据事实上的行业标准之一

2017-11-09

（Hadoop的数据库，分布式的，大数据量的，随机的，实时的，非关系型数据库）

要查询某一个具体的字段，需要指定坐标：表名---->行健---->列族(ColumnFamily)：列名（Qualifier）---->版本; 4：HBase简介： HBase – Hadoop

2017-10-24

java语言编程使用正则表达式来实现提取（美团 3-5年经验 15-30k 北京 hadoop高级工程）中的3-5和15-30

如有这样的一条数据进来：美团 3-5年经验 15-30k 北京 hadoop高级工程 //正则表达式提取工资值，因为15-30k后面有k,3-5年经验，不干净 public static int

2017-02-25

Logstash安装和设置（图文详解）（多节点的ELK集群安装在一个节点就好）

hadoop 4096 Mar 27 01:36 filebeat-1.3.1-x86_64 drwxr-xr-x. 10 hadoop hadoop 4096 Oct 31 17:15 hadoop-

2017-11-06

日志采集框架Flume以及Flume的安装部署（一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统）

/conf:/home/hadoop/apache-flume-1.6.0-bin/lib/*:/home/hadoop/hadoop-2.4.1/etc/hadoop:/home/hadoop/hadoop

2017-12-12

apache-storm-0.9.6.tar.gz的集群搭建（3节点）（图文详解）

hadoop hadoop 12 Apr 12 11:27 hadoop -> hadoop-2.6.0 drwxr-xr-x. 10 hadoop hadoop 4096 Apr 12 16:

2017-11-04

Kibana安装（图文详解）（多节点的ELK集群安装在一个节点就好）

9 hadoop hadoop 4096 Feb 22 06:05 elasticsearch-2.4.3 -rw-r--r--. 1 hadoop hadoop 908862 Jan 10 11:38

2017-11-06

在CentOS下安装tomcat并配置环境变量（改默认端口8080为8081）

-2.6.0 drwxr-xr-x. 15 hadoop hadoop 4096 Nov 14 2014 hadoop-2.6.0-src drwxrwxr-x. 8 hadoop hadoop 4096

2017-11-05

2 weekend110的HDFS的JAVA客户端编写 + filesystem设计思想总结

/share/hadoop/hdfs/lib/* /home/hadoop/app/hadoop-2.4.1/share/hadoop/common/* home/hadoop/app/

2017-11-21

4 weekend110的textinputformat对切片规划的源码分析 + 倒排索引的mr实现 + 多个job在同一个main方法中提...

@weekend110 ~]$ /home/hadoop/app/hadoop-2.4.1/bin/hadoop fs -ls /tmp Found 1 items drwx------ - hadoop

2017-11-19

apache-storm-1.0.2.tar.gz的集群搭建（3节点）（图文详解）（非HA和HA）

hadoop 4096 Apr 20 12:00 flume-1.7.0 lrwxrwxrwx. 1 hadoop hadoop 12 Apr 12 11:27 hadoop -> hadoop

2017-11-12

Filebeat-1.3.1安装和设置（图文详解）（多节点的ELK集群安装在一个节点就好）（以Console Output为例）

:15 hadoop-2.6.0 drwxr-xr-x. 15 hadoop hadoop 4096 Nov 14 2014 hadoop-2.6.0-src drwxrwxr-x. 8 hadoop

2017-11-19

Elasticsearch之IKAnalyzer的过滤停止词

--r--. 1 hadoop hadoop 130 Dec 14 10:34 mydict.dic -rw-r--r--. 1 hadoop hadoop 63188 Dec 14 10:34 single_word.dic

2017-11-19

Logstash之Logstash inputs（file和redis插件）、Logstash outputs（elasticsearch ...

2 hadoop hadoop 4096 Mar 27 03:58 bin -rw-rw-r--. 1 hadoop hadoop 102879 Nov 14 10:04 CHANGELOG.md -

2017-11-06

1 weekend110的hdfs源码跟踪之打开输入流 + hdfs源码跟踪之打开输入流总结

@weekend110 app]$ cd hadoop-2.4.1/ [hadoop@weekend110 hadoop-2.4.1]$ ll total 60 drwxr-xr-x. 2 hadoop

2017-11-19

【原创】浅谈hbase表中数据导出导入（也就是备份）

:/home/hadoop/hadoop/libexec/../hadoop-core-1.0.3.jar:/home/hadoop/hadoop/libexec/..

2012-08-21

网站点击流数据分析项目----之现学现卖

/hadoop/soft/hadoop-2.6.4/share/hadoop/common/lib/asm-3.2.jar:/home/hadoop/soft/hadoop-2.6.4/share/hadoop

2017-12-16

如何运行Spark程序

Classpath","/home/hxsyl/Spark_Relvant/hadoop-2.6.4/share/hadoop/common/hadoop-nfs-2.6.4.jar":"System

2016-11-23

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。

精选列表

Hive数据导入——数据存储在Hadoop分布式文件系统中，往Hive表里面导入数据只是简单的将数据移动到表所在的目录中！

Hadoop 这样业界顶级的大规模数据处理平台，均发现满足不了类似双十一这样全世界的剁手党蜂拥而至的热情

Hive数据分析——Spark是一种基于rdd（弹性数据集）的内存分布式并行处理框架，比于Hadoop将大量的中间结果写入HDFS，Spar...

（Hadoop的数据库，分布式的，大数据量的，随机的，实时的，非关系型数据库）

java语言编程使用正则表达式来实现提取（美团 3-5年经验 15-30k 北京 hadoop高级工程）中的3-5和15-30

Logstash安装和设置（图文详解）（多节点的ELK集群安装在一个节点就好）

日志采集框架Flume以及Flume的安装部署（一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统）

apache-storm-0.9.6.tar.gz的集群搭建（3节点）（图文详解）

Kibana安装（图文详解）（多节点的ELK集群安装在一个节点就好）

在CentOS下安装tomcat并配置环境变量（改默认端口8080为8081）

2 weekend110的HDFS的JAVA客户端编写 + filesystem设计思想总结

4 weekend110的textinputformat对切片规划的源码分析 + 倒排索引的mr实现 + 多个job在同一个main方法中提...

apache-storm-1.0.2.tar.gz的集群搭建（3节点）（图文详解）（非HA和HA）

Filebeat-1.3.1安装和设置（图文详解）（多节点的ELK集群安装在一个节点就好）（以Console Output为例）

Elasticsearch之IKAnalyzer的过滤停止词

Logstash之Logstash inputs（file和redis插件）、Logstash outputs（elasticsearch ...

1 weekend110的hdfs源码跟踪之打开输入流 + hdfs源码跟踪之打开输入流总结

【原创】浅谈hbase表中数据导出导入（也就是备份）

网站点击流数据分析项目----之现学现卖

如何运行Spark程序

资源下载

Mario

Spring

Sublime Text

WebStorm

欢迎您来访！