MongoDB mapReduce案例分析二-低调大师

MongoDB mapReduce案例分析二

2017-11-15 552

例2、查找订单中一个商品对应的订单总数和这个商品每个订单的平均销售数量

1、先看订单表orders的数据结构如下图

这样的数据共有6条，如下，只列出了items这个字段

2、下面给出map函数

 
        var 
        mapFunction2 = 
        function
        () { 
       
        for 
        (
        var 
        idx = 0; idx < 
        this
        .items.length; idx++) { 
       
        var 
        key = 
        this
        .items[idx].sku; 
       
        var 
        value = { 
       
        count: 1,
       
        qty: 
        this
        .items[idx].qty 
       
        };
       
        emit(key, value);
       
        }
       
        };

3、写reduce函数

 
        var 
        reduceFunction2 = 
        function
        (keySKU, countObjVals) { 
       
        reducedVal = { count: 0, qty: 0 };
       
        for 
        (
        var 
        idx = 0; idx < countObjVals.length; idx++) { 
       
        reducedVal.count += countObjVals[idx].count;
       
        reducedVal.qty += countObjVals[idx].qty;
       
        }
       
        return 
        reducedVal; 
       
        };

4、写finalize函数

 
        var 
        finalizeFunction2 = 
        function 
        (key, reducedVal) { 
       
        reducedVal.avg = reducedVal.qty/reducedVal.count;
       
        return 
        reducedVal; 
       
        };

5、执行mapReduce函数

6、查看结果

本文转自shayang8851CTO博客，原文链接：http://blog.51cto.com/janephp/1292033，如需转载请自行联系原作者

微信关注我们

原文链接：https://yq.aliyun.com/articles/470621

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

elasticsearch indices.recovery 流程分析（索引的_open操作也会触发recovery）——主分片recove...

摘自：https://www.easyice.cn/archives/231 elasticsearch indices.recovery 流程分析与速度优化目录[隐藏] 主分片恢复流程副本分片恢复流程 recovery 慢的原因分析 synced flush 机制副分片如何做到和主分片一致的提升 recovery 速度的建议使用 _forcemerge 集群 FullRestart 的建议操作过程一些用于查看 recovery 状态的命令问题参考: 基于版本:5.5.3 recovery 是 es 数据恢复,保持数据一致性的过程,触发条件包括:从快照备份恢复，节点加入和离开,索引的_open操作等. recovery 由clusterChanged触发,进入到: 1 2 3 4 applyNewOrUpdatedShards-> applyInitializingShard 根据数据分片性质,分为主分片和副本分片恢复流程. 主分片从 translog 自我恢复,副本分片从主分片拉取数据进行恢复. 经历的阶段为: init: Recovery has not ...

2017-11-16

693

随着公司业务的扩大，服务器的数量也随之变大，在管理上如果还是单独的使用ip来管理，十分的麻烦，而且在某些业务或者软件上，比如使用bi使用hadoop来进行数据挖掘与日志分析的时候，hadoop集群需求dns配合，如果集群机器少，可以使用/etc/hosts里设置，但如果多的话，使用dns是更好的选择，puppet的应用也是如此，所以我最近研究了一下bind技术，把我的成果分享给大家。一．介绍 DNS是域名系统(DomainNameSystem)的缩写，是因特网的一项核心服务，它作为可以将域名和IP地址相互映射的一个分布式数据库，能够使人更方便的访问互联网，而不用去记住能够被机器直接读取的IP数串。主从的原理为：原理：主dns服务器上修改完成后重启服务，会主动传送notify值，如果辅助DNS服务器没有收到才参考Refresh，Refresh不成功,则参考Retry，Retry一直不成功,则参考Expire，如果Expire也不成功，则选择放弃zonetransfer的过程。二．测试目的本次测试主要想达到以下2个目的： 1、dns主从；（如master与slave任何一端dns...

2017-11-16

595

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。