搜索[hadoop]结果-低调大师优秀个人博客

精选列表

搜索[hadoop]，共8432篇文章

在 EMR 中使用 ES-Hadoop

在 EMR 中使用 ES-Hadoop ES-Hadoop 是 Elasticsearch(ES) 推出的专门用于对接 Hadoop 生态的工具，使得用户可以使用 Mapreduce(MR)、Spark

2018-06-22

在 EMR 中使用 Mongo-Hadoop

在 EMR 中使用 Mongo-Hadoop Mongo-Hadoop 是 MongoDB 推出的用于 Hadoop 系列组件连接 MongoDB 的组件。

2018-06-22

Hadoop大数据面试题（全）

答：第一题：1使用root账户登录 2 修改IP 3 修改host主机名 4 配置SSH免密码登录 5 关闭防火墙 6 安装JDK 6 解压hadoop安装包 7 配置hadoop的核心文件 hadoop-env.sh

2018-05-22

centOS安装hadoop、编写wordCount小程序

#为了方便后续管理，添加hadoop用户,并设置密码 adduser hadoop passwd hadoop #hadoop用户赋权(加sudo可以执行root的操作) #给sudoers文件读写权

2018-05-09

Hadoop集群nodes unhealthy解决方法

在搭建好Hadoop集群之后，所有服务均可正常启动，但是在运行MapReduce程序的时候，发现任务卡在7/09/07 22:28:14 INFO mapreduce.Job: Running job:

2018-04-09

hadoop_学习_01_入门准备

一、入门准备 1.零基础学习Hadoop 2.大数据初学者应该知道的知识

2018-03-21

hadoop_学习_00_资源帖

一、精品 1.虚无境的博客随笔分类 - hadoop 二、参考资料 1.大数据学习之路（持续更新中...） 2.Hadoop安装教程_单机/伪分布式配置_CentOS6.4/Hadoop2.6.0

2018-03-20

hadoop、yarn和vcpu资源的配置

转载自：https://www.cnblogs.com/S-tec-songjian/p/5740691.html Hadoop YARN同时支持内存和CPU两种资源的调度（默认只支持内存，如果想进一步调度

2018-03-09

附录E Hadoop的word count例子

; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.LongWritable

2018-03-04

Hadoop三大发行版本

这是学习hadoop的基础。 cloudera 对hadoop的升级，打包，开发了很多框架。

2018-02-27

大数据||hadoop集群的时间同步

on 被同步的服务节点（132/133节点服务器）编写时间同步脚本（计划任务） linux|计划任务 -crontab -e 0-59/10 * * * * /usr/sbin/ntpdate hadoop-senior.beifeng.com

2018-02-23

hadoop初学者MapReduce常见错误

<configuration> <property> <name>fs.defaultFS</name> <value>hdfs://hadoop-senior.beifeng.com

2018-02-03

Hadoop 2.x环境搭建准备

一：下载Hadoop image.png 二：安装说明 http://hadoop.apache.org/docs/r2.5.2/hadoop-project-dist/hadoop-common/SingleCluster.html

2018-01-31

Hadoop-No.4之列式存储格式

同一列中的数据比行存数据块中的数据更为相似.当某一列的取值不多是,行存与列存在压缩效果上的差异尤为显著数据仓库类型的应用需要在极大的数据集上对某些特定的列进行聚合操作,而列式存储格式通常很适合此类应用场景显然,列式文件格式也常常出现在Hadoop

2018-01-15

Hadoop-No.1之数据存储选型

文件格式 Hadoop支持多种面向数据存储的文件格式,包括纯文本和Hadoop特有的格式,如SequenceFile.还有一些更加复杂但功能更加丰富的格式可供选择,如Avro与Parquet.不同的格式具有不同的优势

2018-01-15

Hadoop集群（第4期）_SecureCRT使用

按照上图所示，填写要远程连接的"主机名"和"用户名"，比如我要连接"主机名：192.168.1.10"且"用户名：hadoop"的机器，就如上所写。

2017-12-31

Web UI - Browse Hadoop Services

ResourceManager) http://localhost:8088 141.6.2.NodeManager Information http://localhost:8042 141.6.3.Hadoop

2017-12-21

使用Docker搭建Cloudera Hadoop 环境搭建

单节点单节点：https://hub.docker.com/r/cloudera/quickstart/ 相关命令 docker pull cloudera/quickstart:latest docker run --privileged=true --hostname=quickstart.cloudera -p 8020:8020 -p 7180:7180 -p 21050:21050 -p 50070:50070 -p 50075:50075 -p 50010:50010 -p 50020:50020 -p 8888:8888 -t -i 4239cd2958c6 /usr/bin/docker-quickstart /home/cloudera/cloudera-manager --force --express boot2docker user: docker pass: tcuser 说明 Windows下需要采用桥接模式,要不然访问不到容器内的Cloudera Manager端口集群集群：https://hub.docker.com/r/cloudera/clusterdock/ 待续未完成

2017-12-20

Hadoop配置和使用问题记录

关于hadoop如何配置的教程网上已经有不少了，配合hadoop主页上的说明，基本可以顺利在多台机器上配置好hadoop集群。

2017-12-07

hadoop安装配置——伪分布模式

安装这里以安装hadoop-0.20.2为例先安装java,参考这个去着下载hadoop 解压 tar -xzf hadoop-0.20.2 2.

2017-12-05

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。