您现在的位置是:首页 > 文章详情

XL-LightHouse 2.1.9 发布,轻松实现大数据实时统计

日期:2024-05-06点击:146

升级内容:

1、增加client模块统计数据查询RPC接口;
2、增加数据备份和数据导入功能;
3、增加时区参数配置;
4、修改了几个前端页面展示问题;

一键部署,一行代码接入,无需大数据研发运维经验,轻松实现海量数据实时统计!

概述

  • XL-LightHouse 是针对繁杂的数据统计需求而开发的一套集成了数据写入、数据运算和数据可视化等一系列功能,支持超大数据量,支持超高并发的【通用型流式大数据统计系统】。
  • XL-LightHouse 目前已涵盖了各种流式数据统计场景,包括 count、sum、max、min、avg、distinct、topN/lastN 等多种运算,支持多维度计算,支持分钟级、小时级、天级多个时间粒度的统计,支持自定义统计周期的配置。
  • XL-LightHouse 内置丰富的转化类函数、支持表达式解析,可以满足各种复杂的条件筛选和逻辑判断。
  • XL-LightHouse 提供了完善的可视化查询功能,对外提供 API 查询接口,此外还包括数据指标管理、权限管理、统计限流等多种功能。
  • XL-LightHouse 支持时序性数据的存储和查询。

项目特点

通用型流式数据统计或许是唯一一种有可能支撑百万量级数据指标,而成本仍可控制在企业可承受范围之内的技术。目前业内广泛采用的以实时计算、离线计算、OLAP 为主的技术方案都太过于臃肿和笨重,如果替换为以通用型流式数据统计为主,以其他技术方案为辅的实现方式可大幅降低企业成本。XL-LightHouse 期望使用更为轻巧和实用的技术方案应对繁琐的数据统计问题。

  • XL-LightHouse 可以短时间内快速实现庞大量级数据指标,而这是 Flink、Spark、ClickHouse、Doris 之类技术所不能比拟的;
  • 一套系统三种用途,可作为:通用型流式大数据统计系统、数据指标管理系统和数据指标可视化系统。
  • 对单个流式统计场景的数据量无限制,可以非常庞大,也可以非常稀少,既可以使用它完成十亿级用户量 APP 的 DAU 统计、十几万台服务器的运维监控、一线互联网大厂数据量级的日志统计、也可以用它来统计一天只有零星几次的接口调用量、耗时状况;
  • 支持高并发查询统计结果;
  • 轻量级使用,一键部署、一行代码接入、普通工程人员即可轻松驾驭;

可以用来做什么?

XL-LightHouse可应用在企业生产的众多环节,可以帮助职场人从容应对大量琐碎、重复性的数据统计工作,减少不必要的时间浪费,量化工作产出,提高工作效率。

以电商企业来说:

  • 可以为企业决策层提供其所关注的平台交易额、交易量、下单用户数、订单平均金额等指标;
  • 可以为产品经理提供其所负责产品模块的pv、uv和点击率等指标;
  • 可以为运营人员提供关注的拉新用户量,站内广告点击量、点击收益等指标;
  • 可以为开发人员提供其关注的接口调用量、异常量、耗时情况等指标;
  • 可以为算法工程师提供其关注的模型训练时长、模型准确率,模型上线后的效果评测等指标;
  • 可以为运维人员提供其关注的是线上集群的CPU、内存、负载状况等监控指标;
  • 可以为UI设计师提供其关注的不同设计方案的点击转化对比情况;
  • 可以为数据分析师提供各种数据指标来更准确的判断业务的短板、业务的走势、辅助决策层有针对性的制定营销计划;

项目地址

https://github.com/xl-xueling/xl-lighthouse.git

https://gitee.com/xl-xueling/xl-lighthouse.git

演示站点

演示站点:http://119.91.203.220:19232/ 测试账号:admin,密码:123456

部分功能预览

原文链接:https://www.oschina.net/news/290953/xl-lighthouse-2-1-9-released
关注公众号

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。

持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。

文章评论

共有0条评论来说两句吧...

文章二维码

扫描即可查看该文章

点击排行

推荐阅读

最新文章