XL-LightHouse 2.2.4 发布，轻松实现大数据实时统计-低调大师

XL-LightHouse 2.2.4 发布，轻松实现大数据实时统计

2024-06-25 266

XL-LightHouse V2.2.4发布 ~

一键部署，一行代码接入，无需大数据研发运维经验，轻松实现海量数据实时统计！

概述

XL-LightHouse 是针对繁杂的数据统计需求而开发的一套集成了数据写入、数据运算和数据可视化等一系列功能，支持超大数据量，支持超高并发的【通用型流式大数据统计系统】。
XL-LightHouse 目前已涵盖了各种流式数据统计场景，包括 count、sum、max、min、avg、distinct、topN/lastN 等多种运算，支持多维度计算，支持分钟级、小时级、天级多个时间粒度的统计，支持自定义统计周期的配置。
XL-LightHouse 内置丰富的转化类函数、支持表达式解析，可以满足各种复杂的条件筛选和逻辑判断。
XL-LightHouse 提供了完善的可视化查询功能，对外提供 API 查询接口，此外还包括数据指标管理、权限管理、统计限流等多种功能。
XL-LightHouse 支持时序性数据的存储和查询。

项目特点

通用型流式数据统计或许是唯一一种有可能支撑百万量级数据指标，而成本仍可控制在企业可承受范围之内的技术。XL-LightHouse是开源社区第一个也是目前唯一一个通用型流式数据统计系统。目前业内广泛采用的以实时计算、离线计算、OLAP 为主的技术方案都太过于臃肿和笨重，如果替换为以通用型流式数据统计为主，以其他技术方案为辅的实现方式可大幅降低企业成本。XL-LightHouse 期望使用更为轻巧和实用的技术方案应对繁琐的数据统计问题。

XL-LightHouse 可以短时间内快速实现庞大量级数据指标，而这是 Flink、Spark、ClickHouse、Doris 之类技术所不能比拟的；
一套系统三种用途，可作为：通用型流式大数据统计系统、数据指标管理系统和数据指标可视化系统。
对单个流式统计场景的数据量无限制，可以非常庞大，也可以非常稀少，既可以使用它完成十亿级用户量 APP 的 DAU 统计、十几万台服务器的运维监控、一线互联网大厂数据量级的日志统计、也可以用它来统计一天只有零星几次的接口调用量、耗时状况；
支持高并发查询统计结果；
支持自定义存储引擎；
前端基于最新版ArcoDesign(React版本)开发，页面清爽大气，操作体验非常好；
所有代码100%开源，方便进行二次开发；
轻量级开箱即用，一键部署、一行代码接入、普通工程人员即可轻松驾驭；
除大数据版本外，同时支持单机版；

可以用来做什么？

XL-LightHouse 可应用在企业生产的众多环节，可以帮助职场人从容应对大量琐碎、重复性的数据统计工作，减少不必要的时间浪费，量化工作产出，提高工作效率。

以电商企业来说：

可以为企业决策层提供其所关注的平台交易额、交易量、下单用户数、订单平均金额等指标；
可以为产品经理提供其所负责产品模块的 pv、uv 和点击率等指标；
可以为运营人员提供关注的拉新用户量，站内广告点击量、点击收益等指标；
可以为开发人员提供其关注的接口调用量、异常量、耗时情况等指标；
可以为算法工程师提供其关注的模型训练时长、模型准确率，模型上线后的效果评测等指标；
可以为运维人员提供其关注的是线上集群的 CPU、内存、负载状况等监控指标；
可以为 UI 设计师提供其关注的不同设计方案的点击转化对比情况；
可以为数据分析师提供各种数据指标来更准确的判断业务的短板、业务的走势、辅助决策层有针对性的制定营销计划；
可以轻松实现对各类复杂业务逻辑各主要环节的数据监控，及时发现问题并辅助问题排查。
可以面向物联网及工业互联网场景实现各类设备上报数据相关指标统计和监控。

单机模式

单机模式成本低廉，最低配置只需要一台 4 核 8G 的云服务器，部署运维更加简单！

适用场景：

面向中小企业或中小型业务团队使用；
面向 "用完即弃" 的使用场景，有些时候对数据指标的需求，往往只在某个特定阶段。比如：新接口上线要进行接口性能优化；线上业务出现数据异常问题需要排查；数据库读写压力突然暴涨，需要确定异常请求的来源等等，对于此类问题的排查，流式统计可以起到至关重要的作用。但问题排查一般不需要持续很长时间，可能一两周甚至两三天。这种情况可以使用 XL-LightHouse 单机版。一键部署，轻量级使用，问题排查完，将 XL-LightHouse 删除即可。相信灵活的使用 XL-LightHouse 可以为您解决很多棘手的问题！
用于初步体验 XL-LightHouse 或作为二次开发的联调测试环境；

项目地址

https://github.com/xl-xueling/xl-lighthouse.git

https://gitee.com/xl-xueling/xl-lighthouse.git

Web端部分功能预览

微信关注我们

原文链接：https://www.oschina.net/news/298860/xl-lighthouse-2-2-4-released

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

OurBMC大咖说丨第5期：BMC开发中的非标准化问题探讨

栏目介绍："OurBMC大咖说" 是由 OurBMC 社区精心策划的线上讲座栏目，邀请 BMC 相关领域大咖共同探讨 BMC 全栈技术的发展趋势、挑战和机遇。无论你是初学者还是资深从业者，"OurBMC大咖说" 都将为你提供一个宝贵的学习和交流的平台。欢迎各位关注 "OurBMC大咖说"，聆听大咖们的智慧之声，共同推动 BMC 全栈技术的进步和发展！本期人物介绍：汪涛，南京百敖软件有限公司技术总监，百敖BMC团队负责人。毕业于德国不来梅大学电气工程专业，从事固件开发14年，历年来多次承担国家科技支撑计划、科技型中小企业、江苏省科技成果转化、无锡市科技支撑项目等，发表论文3篇，申请专利5项，参与多项BMC固件行业和团体标准制定。前几期的专家老师们都提到了OurBMC社区标准化的问题，我对此深有感触，也十分赞同几位专家老师们的看法，百敖作为国内主要的 IBV 厂家之一，基于 OpenBMC 代码为国内多家厂商提供了基于E2000 BMC和基于其它 BMC 的技术服务，对 BMC 软件的开发和适配有着深厚的经验，借此机会初步探讨下当前 BMC 开发过程中遇到的一些非标准化的问题。 BM...

2024-06-25

304

2024年6月24日，JumpServer开源堡垒机正式发布v3.10.11 LTS版本。JumpServer开源项目组将对v3.10 LTS版本提供长期的支持和优化，并定期迭代发布小版本。欢迎广大社区用户升级至v3.10 LTS最新版本，以获得更佳的使用体验。在JumpServer v3.10.11 LTS版本中，JumpServer开源堡垒机新增支持纳管达梦数据库，进一步丰富了JumpServer所纳管的数据库资产类型。在提升使用效率方面，JumpServer支持自动化任务（即测试资产可连接性）的批量操作。同时，在这一版本中，JumpServer还兼容了更高版本的Elasticsearch，命令存储支持对接Elasticsearch 7和Elasticsearch 8版本。新增功能 1. 支持纳管达梦数据库在JumpServer v3.10.11 LTS版本中，新增支持对达梦数据库的纳管，连接方式支持DB GUI和远程应用方式，进一步丰富了JumpServer开源堡垒机所支持纳管的数据库资产类型。 ▲ 图1 JumpServer支持纳管达梦数据库 ▲ 图2 JumpServe...

2024-06-25

316

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。