袋鼠云 | 基于阿里云数加平台，助力知名物流企业进行大数据应用-低调大师

袋鼠云 | 基于阿里云数加平台，助力知名物流企业进行大数据应用

2017-07-29 537

关于申通易物流

上海申通易物流有限公司是申通旗下的一家集电子商务、仓储、传统物流为一体的服务型公司。公司应电子商务大发展时代需求而生，拥有自主研发的易物流仓内WMS（仓库管理系统）、EDI（数据接口平台）及OMS（订单处理系统）等，为品牌、商家提供电子商务仓配解决方案及专业电子商务第三方精细化仓配一体化服务，协助电商解决电子商务供应链的管理。

申通易物流依托于申通快递在快递行业的品牌影响力和全国领先的快递配送网络，以及在电子商务行业的多年服务经验，致力打造成为一个专业的电子商务服务提供商，为客户提供高效的服务和体验。

问题及挑战
申通易物流团队每个月初要从公司的各个系统去拉取上个月的快递费用数据，然后在本地的数据库中去加工处理，最终得到财务所需要的报表。由于数据分布在各个不同的系统上，抽取数据沟通麻烦，每个月做着重复逻辑的工作，工作效率不高。常常无法按时给出想要的快递费用明细报表，造成很大的困扰。另外公司存储资源不足，导致很多历史数据被删除，大量数据资产流失，这对公司来说是一笔很大的损失。随着业务的不断增长，这些问题越来越突出，急需要找到解决方法。

解决方案及架构
基于阿里云大数据平台，申通易物流搭建了大数据数据仓库系统，主要用于快递费用计算与分析，仓库库存监控等。
架构解读：

数据采集：数据源主要包括云数据库 RDS、移动数据分析（Mobile Analytics）日志、服务接口调用的数据。
以精细化运营为例，用户属性数据存放于 RDS，用户行为数据来源于移动数据分析的日志数据。
数据清洗、处理：使用阿里云数加 Data IDE 把分布在多个数据源的数据集合一起，进行清洗和加工。
数据分析挖掘：使用阿里云数加 Data IDE 的定时任务调度功能，自动完成计算任务并将结果同步回传到数据库；
阿里云数加 Data IDE、机器学习以及 R 等工具主要解决具体的业务分析 ; 阿里云数加 MaxCompute 用于海量数据的存储和计算引擎。
应用：使用阿里云数加 DataV 制作业务看板进行实时业务监控；阿里云数加推荐引擎用于“千人千面”的个性化推荐；阿里云数加 Quick BI 用于业务分析；精细化运营用于用户洞察及精准营销。

收益
通过将不同的数据源进行汇总，企业拥有了完整的数据视图。通过数仓项目的建设，增强了企业的数据质量，保证了数据的统一性，使企业数据数据更加快捷、方便、准备。使企业的数据价值得到更大程度的发挥。
阿里云的数加平台提供了一站式的大数据解决方案。从数据的采集、开发运维到数据展现，提供了完整的方案。同时数加平台提供灵活的计费模式，节约了企业使用成本，降低了企业使用数据的门槛。

解决方案架构图

微信关注我们

原文链接：https://yq.aliyun.com/articles/156262

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

SQL Server数据库大型应用解决方案总结

随着互联网应用的广泛普及，海量数据的存储和访问成为了系统设计的瓶颈问题。对于一个大型的互联网应用，每天百万级甚至上亿的PV无疑对数据库造成了相当高的负载。对于系统的稳定性和扩展性造成了极大的问题。一、负载均衡技术负载均衡集群是由一组相互独立的计算机系统构成，通过常规网络或专用网络进行连接，由路由器衔接在一起，各节点相互协作、共同负载、均衡压力，对客户端来说，整个群集可以视为一台具有超高性能的独立服务器。 1、实现原理　　实现数据库的负载均衡技术，首先要有一个可以控制连接数据库的控制端。在这里，它截断了数据库和程序的直接连接，由所有的程序来访问这个中间层，然后再由中间层来访问数据库。这样，我们就可以具体控制访问某个数据库了，然后还可以根据数据库的当前负载采取有效的均衡策略，来调整每次连接到哪个数据库。 2、实现多数据库数据同步对于负载均衡，最重要的就是所有服务器的数据都是实时同步的。这是一个集群所必需的，因为，如果数不据实时、不同步，那么用户从一台服务器读出的数据，就有别于从另一台服务器读出的数据，这是不能允许的。所以必须实现数据库的数据同步。这样，在查询的时候就可以有多...

2017-07-30

575

首期寄语在互联网从业20年，目睹了互联网攻防问题的不断演变。以安全为例，到了今天，它不再只是攻防对抗：安全向云上演进，融入了像AI、机器学习等新科技，也深入到了各个行业，游戏就是其中之一。对于游戏行业，和每一个行业的安全决策者来说，一份及时更新的全球资讯，与本行业高相关的安全动态，是我们工作的参考，也可以提升我们的眼界。我们不仅希望为游戏行业的用户，提供可靠的计算和安全服务，也希望能成为行业内值得信赖的伙伴，帮助游戏行业的安全决策者，把安全这件事儿做好，也把行业安全的全球局势摸透。阿里游戏云总监马全治【本周头条】 20多种BankBot移动恶意软件应用程序，潜伏在Google Play中。点击查看原文概要：恶意软件可以绕过控制，渗透到Google Play等应用商店中，并且长期“寄居”在此，BankBot

2017-07-30

548

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。