MapReduce 示例：减少 Hadoop MapReduce 中的侧连接
摘要：在排序和reducer 阶段，reduce 侧连接过程会产生巨大的网络I/O 流量，在这个阶段，相同键的值被聚集在一起。 本文分享自华为云社区《MapReduce 示例：减少 Hadoop MapReduce 中的侧连接》，作者：Donglian Lin。 在这篇博客中，将使用 MapReduce 示例向您解释如何在 Hadoop MapReduce 中执行缩减侧连接。在这里，我假设您已经熟悉 MapReduce 框架并知道如何编写基本的 MapReduce 程序。本博客中讨论的主题如下： 什么是加入？ MapReduce 中的连接 什么是 Reduce 侧连接？ 减少侧连接的 MapReduce 示例 结论 什么是联接？ join操作用于基于外键将两个或多个数据库表合并。通常，公司在其数据库中为客户和交易 记录维护单独的表 。而且，很多时候这些公司需要使用这些单独表格中的数据生成分析报告。因此，他们使用公共列（外键）（如客户 ID 等）对这些单独的表执行连接操作，以生成组合表。然后，他们分析这个组合表以获得所需的分析报告。 MapReduce 中的连接 就像 SQL join ...
