搜索[实时etl]结果-低调大师优秀个人博客

精选列表

搜索[实时etl]，共10000篇文章

从 Snowflake 到 Apache Doris：Planet 实时分析成本直降 80%、查询加速 90 倍

实现真正的实时分析：新的架构支持了实时数据摄入与分析，为业务决策提供了更敏锐的洞察力。

2025-10-14

从 Snowflake 到 Databend Cloud：全球游戏平台借助 Databend 实现实时数据处理

导读：某全球游戏平台为全球数百万玩家提供实时的技能型游戏体验与无缝的实时互动。对该游戏平台而言，保持数据的实时更新和实时分析，对提升玩家互动和留存率至关重要。

2025-03-19

SelectDB 实时分析性能突出，宝舵成本锐减与性能显著提升的双赢之旅

为支撑宝舵 BBI Cloud 数据分析服务，宝舵需要一个具备多源异构数据接入能力、高实时性可扩展、稳定性优异的实时分析数据库，该数据库需要涵盖以下功能：多源异构数据实时接入：支持多渠道（100+

2025-03-12

从离线到实时：无锡锡商银行基于 Apache Doris 的数据仓库演进实践

低延时实时写入：支持秒级别的数据实时写入、更新和删除；支持主键表模型写时合并，可实现微批高频实时写入；并且支持主键模型 Sequence 列设置，可保证数据导入过程中的有序性。

2024-05-08

大数据实时链路备战——数据双流高保真压测 | 京东云技术团队

一、大数据双流建设 1.1 数据双流大数据时代，越来越多的业务依赖实时数据用于决策，比如促销调整，点击率预估、广告分佣等。

2023-07-25

当金融风控遇上人工智能，众安金融的实时特征平台实践

（4）实时特征平台：开发好的特征和模型需要在实时特征平台进行注册，在实时特征平台配置好相关的信息后，就可以通过实时特征平台的数据服务能力，提供上游业务的特征查询和模型应用的能力。

2023-06-28

使用篇丨链路追踪（Tracing）很简单：链路实时分析、监控与告警

03 链路实时分析随着时间的流逝，马上要临近双11啦，为了保障大促洪峰流量下的系统可用性，小玉的部门发起了全面治理慢调用接口的活动。

2023-04-10

出行平台如何基于StarRocks构建实时数仓？

离线计算基于 Hadoop+SparkSQL 进行数仓建设，实时计算基于 Kafka+Spark Streaming 开发实时数据特征，数据落地到 MongoDB、MySQL、Redis 等数据库，然后通过

2023-01-06

万亿数据秒级响应，Apache Doris 在360 数科实时数仓中的应用

业务需求随着金融科技业务的不断发展，对数据的安全性、准确性、实时性提出了更严格的要求，早期 Clickhouse 集群用于分析、标签业务场景，但是存在稳定性较低、运维复杂和表关联查询较慢等问题，除此之外

2022-11-22

实时数据处理场景化典型应用实例（干货）~

什么是数据实时处理？有哪些典型应用场景？实时数据处理的意义是？下文围绕实时数据应用的产品特性和场景，一一解答。

2022-06-13

众安保险 x StarRocks | 全新实时分析能力开启数字化经营新局面

→需要⽀持数据的实时写⼊、实时查询。

2022-04-07

WGCLOUD 监控系统新特性，支持文件实时监控和数据库运行状态监测

WGCLOUD是一款集成度较高的分布式运维监控系统，具有易部署、易上手使用、轻量、高效等特点，server端基于springboot开发，agent端使用go编写。核心模块包括：主机系统信息监控，CPU监控，CPU温度监控，内存监控，网络流量监控，磁盘IO监控，磁盘空间监测，系统负载监控，硬盘smart健康检测，应用进程监控，端口监控，docker监控，日志文件监控，文件防篡改保护，数据可视化监控，自动生成拓扑图、大屏可视化，数通设备监测，服务接口监测，web ssh堡垒机，指令下发，告警信息（邮件、钉钉、微信等）推送。码云源码下载：https://gitee.com/wanghouhou/wgcloud GITHUB源码下载：https://github.com/tianshiyeben/wgcloud 官网：http://www.wgstart.com 支持运行系统支持监测Linux系列：Debian、RedHat、CentOS、ubuntu、麒麟、统信、龙芯、树莓派等支持监测windows系列：windows server2003以上(不含2003)，win7，win8，win10等支持监测unix系列：solaris，FreeBSD，OpenBSD 支持监测macOS系列：macOS amd64 WGCLOUD-v3.3.5 更新说明，2021-09-26： 1.新增，agent端可自定义开启/关闭执行下发指令，默认关闭 2.新增，批量删除主机、端口、进程、docker、日志监控等 3.新增，批量添加端口、进程、docker、日志监控监控 4.新增，文件防篡改保护机制，监测主机上的文件是否被篡改，发现篡改时发送告警通知 5.新增，数据表统计导出excel 6.新增，server支持在JDK11运行，原JDK1.8依然支持 7.新增，一个只读账号，登陆后只能浏览查看，没有新增、修改、删除权限 8.新增，统计分析报表，多维度图表分析所有主机整体运行状态 9.新增，支持数据库连接状态指标监测，如用户数量、当前连接数量等 10.优化，大屏展示 11.新增，使用https时候，web ssh前端页面web socket使用443端口，如wss://domain:443/ws 12.新增，守护进程(wgcloud-daemon-release)端口9997，再也不用开启给agent主机访问了，能让server访问到守护进程就可以了，server和守护进程在一个主机，就是本机访问，不存在防火墙开启端口的问题了，就是agent->server->守护进程 13.bug，修复进程、docker导出excel的bug 14.优化，对server基础架构组件进行了整体升级 15.bug，修复一些已知的bug

2021-10-02

袋鼠云：基于Flink构建实时计算平台的总体架构和关键技术点

伴随着以Flink为代表的实时技术的飞速发展，实时计算越来越多的被企业使用，但是在使用中下面提到的各种问题也随之而来。开发者使用门槛高、产出的业务数据质量没有保障、企业缺少统一平台管理难以维护等。

2021-07-16

Tapdata 实时数据融合平台解决方案（一）：现代企业数据架构及痛点

数据孤岛带来的影响严重阻碍了新业务对已有数据的重复利用: 需要大量时间对接和同步；用户体验下降，数据不完整不实时；重复建设，复用率低等。

2021-06-04

树莓派4B基于jenkins+jmeter+granfa+influxdb搭建接口实时监控平台

硬件：Raspberry Pi 4B-8g版本系统：Ubuntu 20.04 LTS 最近有个客户化本地实施的项目需要对接口实时监控，以便即时发现问题，我们在树莓派Pi4(IP：192.168.5.21

2021-02-25

Linux 下 4 种实时监控日志文件方法，总有一种是你喜欢的

在 Linux 下如何才能实时查看日志内容呢？有很多工具可以帮助我们在文件持续修改的同时输出文件内容，最常用的莫过于 tail 命令了。

2020-12-11

TRTC助力高并发、高可用实时音视频互动场景落地（内含开发福利）

面对疫情压力，腾讯云在音视频领域的整体流量带宽实现翻倍增长，其中腾讯实时音视频（Tencent Real-Time Communication，TRTC）以多人音视频通话和低延时互动直播两大场景化方案，

2020-04-17

Lyft 基于 Flink 的大规模准实时数据分析平台（附FFA大会视频）

比如较高的延迟，导入数据无法满足准实时查询的要求；并且基于 Kinesis Client Library 的流式数据导入性能不足；导入数据存在太多小文件导致下游操作性能不足；数据 ETL 大多是高延迟多日多步的架构

2019-12-16

MPP架构实时大数据平台，分析性数据库 PostgreSQL 6.0 邀您公体验！

信息摘要： MPP架构实时大数据平台，云数据库 ADB for PostgreSQL 6.0 限时免费公测，邀您体验！

2019-10-16

袋鼠云研发手记 | 数栈DTinsight：详解FlinkX中的断点续传和实时采集

袋鼠云云原生一站式数据中台PaaS——数栈，覆盖了建设数据中心过程中所需要的各种工具（包括数据开发平台、数据资产平台、数据科学平台、数据服务引擎等），完整覆盖离线计算、实时计算应用，帮助企业极大地缩短数据价值的萃取过程

2019-10-11

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。