搜索[mapreduce]结果-低调大师优秀个人博客

精选列表

搜索[mapreduce]，共3589篇文章

计算机视觉库/人脸识别开源软件

python 的第三方识图服务 1 当前版本的识图成功率并不理想,内置的几个算法在不同类型的图片中发挥不同(详情请看文档) 2 色彩对比在当前版本比较糟糕 2 单进程(可配置),所以如果需要高性能请使用mapreduce

2016-08-10

Spark Streaming 实现思路与模块概述

Hadoop MapReduce, Spark RDD API 进行批处理时，一般默认数据已经在 HDFS, HBase 或其它存储上。

2016-02-04

Hadoop分布式文件系统：架构和设计要点

典型的如 MapReduce框架，或者一个 web crawler应用都很适合这个模型。 5、移动计算的代价比之移动数据的代价低。

2013-06-26

DolphinDB脚本语言的混合范式编程

getCompletedQueries{10}, `nodeA`nodeB); 清除所有数据节点上的缓存： pnodeRun(clearAllCache); 5.4 分布式计算 mr用于开发基于MapReduce

2021-04-06

Apache DolphinScheduler 如何实现自动化打包+单机/集群部署？

10000, maybe it was set to 1000) yarn.job.history.status.address=http://aws2:19888/ws/v1/history/mapreduce

2023-09-12

深入浅出流批一体理论篇——数据架构的演进

其中最成功、最知名的便是Google研发的分布式文件系统与MapReduce计算引擎，后来这套技术被开源重写为了Hadoop体系的多个项目，其生态圈也不断扩大。

2023-08-09

【Iceberg＋Alluxio】助力加速数据通道（上篇）

Alluxio第一个功能是可以使用Alluxio去连接所有的计算引擎和存储系统，如果你上面的系统搭载了 Presto、Spark、 MapReduce、Hive这一类的系统，你可以通过Alluxio去访问下面所有的存储引擎

2022-10-26

【超详细】Apache Durid从入门到安装详细教程

Presto 它没有使用MapReduce，大部分场景下比Hive快一个数量级，其中的关键是所有的处理都在内存中完成。 Impala 基于内存运算，速度快，支持的数据源没有Presto多。

2022-08-26

面向大规模数据的云端管理，百度沧海存储产品解析

不管是 MapReduce 这样的大数据场景，还是 AI 场景，底层其实都可以选择对象存储 BOS 来承接海量数据的存储能力。对于大数据场景而言，常见的场景包括离线计算场景和线计算场景。

2022-08-18

Apache DolphinScheduler 3.0.0 正式版发布！

修复文本文件 busy 的问题修复项目授权时生成一个重复授权项目的问题修复因无法连接到 postgresql 而启动服务器失败的问题修复消息显示找不到数据源插件“Spark”的问题修复 MapReduce

2022-08-10

安全业务全链路数据仓库在58的实践与应用

是不是Hive SQL、Spark SQL、MapReduce等这些计算引擎都玩不转了。正式因为有了数据字典，才让我们在线特征系统特征计算可配置化成为了可能。

2022-04-26

老同事拉我创业，做一家开源存储公司

2005 年，这一成果与 MapReduce、BigTable 一起成为谷歌引爆大数据时代的“三驾马车”。

2022-04-06

面试官: Flink双流JOIN了解吗? 简单说说其实现原理

考虑到T-1统计场景对时效性要求很低，可以使用Hive SQL来处理，底层跑Mapreduce任务。如果想提高运行速度，换成Flink或Spark计算引擎，使用内存计算。

2022-01-14

面试系列五之项目涉及技术Spark

（重点） **累加器（accumulator）**是Spark中提供的一种分布式的变量机制，其原理类似于mapreduce，即分布式的改变，然后聚合这些改变。

2021-06-22

每一个程序员，都渴望成为一名分布式系统架构师

从计算方式上看，一共就两种方法： MR 方式（MapReduce） Stream 方式从处理过程来看，也只有两种模式： Actor 模式流水线模式 4.5 分布式可靠性到此，在知道了这些知识之后，

2020-12-23

Hadoop分布式文件系统设计要点与架构

典型的如MapReduce框架，或者一个web crawler应用都很适合这个模型。5、移动计算的代价比之移动数据的代价低。

2019-10-19

来自俄罗斯的ClickHouse列式数据在CentOS7配置和基础性能测试

hadoop-yarn impala-kudu-2.7.0+cdh5.9.0+0-1.cdh5.9.0.p0.11.el7.x86_64 has missing requires of hadoop-mapreduce

2019-10-16

2019 年 NoSQL 数据库 TOP 15：MongoDB、微软、Couchbase

Couchbase提供针对文档的全面支持、灵活的数据模型、索引、全文搜索以及面向实时分析的MapReduce。

2019-03-27

0031-如何在CDH启用Kerberos的情况下安装及使用Sentry(一)

Table=test->action=insert; (state=42000,code=40000) 0: jdbc:hive2://localhost:10000/> 执行Hive的MapReduce

2018-11-20

大蕉毕业三周年了,有话对你说 No.103

比如我自己实现了 MapReduce，自己实现了Google File System，自己实现了配置中心，自己实现了区块链小玩具。

2018-06-30

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。