理财农场大数据初探之路-低调大师

理财农场大数据初探之路

2017-05-02 592

640?wx_fmt=png&tp=webp&wxfrom=5&wx_lazy=

概述

不以需求为目的的技术研究都是耍流氓

由于公司业务的快速发展，以及运营部门的需求，需要实现投资用户的月账单功能。

数据背景

目前平台投资用户57万多，投资流水数据已超过千万级，另外还需要统计用户的充值、提现、回款本金、利息、奖励、红包、区分各种产品的分类统计（定期、活期）、历史投资分布、收益趋势、打败多少用户、月度理财之星等等指标。

技术选型背景

在此之前就有类似需求，统计2016年投资用户的年度账单。当时部门几个核心的人员也针对年度账单做了分析及技术选型，有考虑定时任务多线程跑批、存储过程、读写库分离等，甚至为了不影响平台应用的资源，单独购买数据库跑批。最终的方案是多线程（10个线程）通过java调用、数据库读写分离、单独服务器、单独数据库，进行跑批实现；当然最终的结果也是顺利实现了，但过程不尽人意，记得

微信关注我们

原文链接：https://yq.aliyun.com/articles/75312

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

打造深度学习的云端实验室

本系列将利用阿里云容器服务的机器学习解决方案，帮助您了解和掌握TensorFlow，MXNet等深度学习库，开启您的深度学习之旅。第一篇：打造深度学习的云端实验室第二篇： GPU资源的监控和报警，支撑高效深度学习的利器第三篇：利用TFRecord和HDFS准备TensorFlow训练数据我们工作中常常会问到：“深度学习从哪里学起？” 在读过了大量的文章，看过了无数的教程后，许多朋友依然表示很无感。这其实很正常，因为纸上得来终觉浅么，绝知此事要躬行。为了帮助大家快速上手这一个机器学习分支，阿里云容器服务机器学习解决方案提供了丰富的开源框架帮助大家实践，其中包括TensorFlow， Keras和MXNet，为了方便您学习和掌握，我们会编写一系列的文章，介绍其中的细节。本文是这个系列中的第一篇文章，我会在基于阿里云容器服务的机器学

2017-05-03

639

今天，科技界迎来了一个振奋人心的消息：世界上第一台超越早期经典计算机的光量子计算机在中国诞生！这标志着我国的量子计算机研究领域已迈入世界一流水平行列。该光量子计算机是由中科大、中国科学院-阿里巴巴量子计算实验室、浙江大学、中科院物理所等协同完成参与研发的，是货真价实的“中国造”。量子计算机是指利用量子相干叠加原理，理论上具有超快的并行计算和模拟能力的计算机。如果将传统计算机比作自行车，量子计算机就好比飞机。使用亿亿次的“天河二号”超级计算机求解一个亿亿亿变量的方程组，所需时间为100年。而使用一台万亿次的量子计算机求解同一个方程组，仅需0.01秒。（图：中科院研制的光量子计算机线路图）据中科院院士潘建伟介绍，研究团队在2016年首次实现十光子纠缠操纵的基础上，构建出光量子计算原型机，该原型机的“玻色取样”速度比业界快了2.4万倍。

2017-05-03

813

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。