百万级数据量的实时统计报表该采用什么解决方案？-低调大师

百万级数据量的实时统计报表该采用什么解决方案？

2020-12-05 1473

需求：实时统计每天的访问数据，总结数据。

数据量存储：

两个大表，每个表现在有500万数据，每个月会递增100万。

一个类型配置表，基本固定。

实时统计时，会用上面三个表进行联表查询，用类型配置表进行分组，统计出总数。

用mysql查询起来会比较慢。

一般情况下，这种实时统计分析报表，都会引入什么第三方框架实现吗？

微信关注我们

原文链接：https://www.oschina.net/question/732584_2320258

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

我国网络安全产业增速领跑全球发展驶入“快车道”

2020年，我国网络安全产业规模预计超过1700亿元，较2015年翻一番;网络安全相关企业超过3000家，网络安全上市企业总市值超过5000亿元……在日前举办的2020年中国网络安全产业高峰论坛上，一份份亮丽的成绩单彰显着我国网络安全产业的发展活力。网络安全产业高速增长 2020年产业规模将超1700亿元 “在北京市的海淀园、通州园、经开区信创园三个国家级网络安全产业园区内，完成注册的企业达到了110多家，聚集了国内众多的网络安全领军企业。”北京市副市长殷勇在提到北京市网络安全产业发展情况时介绍。网络安全产业园区的蓬勃发展是我国网络安全产业迅猛发展的一个缩影。近年来，我国网络安全产业呈高速增长态势，据中国信通院测算，2020年产业规模将超过1700亿元，较2015年翻一番，增速领跑全球。网络安全产业链条也不断完善，目前我国从事网络安全相关业务的企业超过3000家，覆盖网络安全设备、安全服务、安全软件、安全集成等环节，产业链上下游协同效应进一步增强。据了解，为提升产业基础能力，工信部已连续三年组织实施工业互联网创新发展工程，累计支持网络安全产业链协同创新、公共服务平台建设等200余...

2020-12-04

649

12月6日消息公安部网安局官方微信号今日发布了一则重要提醒：你常使用的共享充电宝可能被植入木马程序，一旦插入手机，可能就会盗取你的个人信息。哪些充电宝可能存在安全隐患呢?一是商场里的可租赁移动电源，二是火车站里叫卖的满电充电宝，三是扫码免费送的充电宝。警方在文中表示，人流密集场所有的充电宝或免费试用，或免费赠送，但里面却隐藏着木马程序，一旦插入手机，就会盗取你的个人信息。警方提示，不要随意领取和购买来历不明的移动电源，如有需要，请选择正规产品。连接移动电源时，如弹出是否“信任”提示，请保持警惕。

2020-12-06

645

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。