-
突破极限: 高负载场景下的单机300M多行正则日志采集不是梦
作者:裘文成(翊韬) 问题背景 在当今数字化时代,日志数据已成为企业 IT 运营和业务分析的关键资源。然而,随着业务规模的扩大和系统复杂度的提升,日志数据的体量呈现爆发式增长,给日志采集和处理系统带来了巨大挑战。最近,我们遇到了一个典型案例,充分体现了当前日志服务采集在高负载场景下面临的困境,以下为客户现状: 海量日志与正则采集:客户的某项业务产生了数量巨大...
时间:2025-04-02点击:93收藏
-
Apache Parquet Avro格式反序列漏洞
漏洞描述 Apache Parquet Java是一个开源的工具,用于优化大规模数据处理。其中parquet-avro模块用于转换parquet格式与avro数据格式。 在parquet-avro 1.15.0 及之前的版本中,AvroConverters.java中的FieldStringableConverter方法未对传入的stringableClas...
时间:2025-04-02点击:153收藏
-
拉卡拉 x Apache Doris:统一金融场景 OLAP 引擎,查询提速 15 倍,资源直降 52%
导读:拉卡拉早期基于 Lambda 架构构建数据系统面临存储成本高、实时写入性能差、复杂查询耗时久、组件维护复杂等问题。为此,拉卡拉选择使用 Apache Doris 替换 Elasticsearch、Hive、Hbase、TiDB、Oracle / MySQL 等组件,实现了 OLAP 引擎的统一、查询性能提升 15 倍、资源减少 52% 的显著成效。 拉...
时间:2025-04-02点击:106收藏
-
虚拟线程/有栈协程对于Java的意义
本文探讨了虚拟线程(有栈协程)对Java的重要意义,从传统同步线程模型到异步响应式编程模型,再到用户线程模式和协程的实现原理,全面分析了Java在高并发场景下的演进历程。文章首先介绍了传统的thread per request模型,指出其资源占用高的问题,并引出异步编程模型的优势与弊端。接着对比了无栈协程(如Kotlin中的协程)和有栈协程(如Go中的gor...
时间:2025-04-02点击:176收藏
-
大模型 Token 的消耗可能是一笔糊涂账
作者:望宸 如果您正在部署大模型应用,务必提前和 CEO 打好预防针,大模型应用远不如 Web 应用在资源成本上那么可控。 经典的 Web 应用,例如电商、游戏、出行、新能源、教育和医疗等,CPU 的消耗是可控的,和应用的在线人数和登陆时长成正相关,如果计算资源突增,可能是运营团队在做活动,也可能是预期外的突发流量,通过服务器弹性扩容后,稳定一段时间就会缩容...
时间:2025-04-02点击:146收藏
-
【直播】基于昇腾的大模型创新应用和实践指南
随着大模型技术快速发展,其在自然语言处理、多模态交互等领域的应用逐渐深入产业场景。然而,开发者与企业落地大模型时仍面临算力需求高、推理效率不足、部署成本优化难等现实问题。昇腾AI基础软硬件平台通过异构计算架构、全场景AI框架等技术,为大模型开发与部署提供了高效支撑体系。 4月9日晚,开源中国OSCHINA 直播栏目【数智漫谈】将邀请具备一线开发经验的技术专家...
时间:2025-04-02点击:109收藏
-
字符串替换研究
一、背景 需求非常简单,给定一组关键词,需要将商品名称中出现过的关键字替换掉; 如:skuName="HUAWEI Pura 70 Pro 国家补贴500元 羽砂黑 12GB+512GB 超高速风驰闪拍 华为鸿蒙智能手机" 需要替换成 skuName="HUAWEI Pura 70 Pro 羽砂黑 12GB+512GB 超高速风驰闪拍 华为鸿蒙智能手机" 这...
时间:2025-04-02点击:114收藏
-
待到山花烂漫时:鸿蒙开发者的个人感悟
序言:用代码浇灌春天,最终必将见证万紫千红的生态盛景。 她说:“我愿在这时代盛开,我花开后百花杀” 吉林银行作为吉林省经济发展的 “金融引擎”,在数字化转型浪潮中勇立潮头。其开发团队通过分布式架构重构、ArkUI-X 框架迁移及原子化服务开发等技术突破,历时21个自然日完成 HarmonyOS NEXT 核心功能版本适配。今天让我们采访一下吉林银行的鸿蒙开发...
时间:2025-04-02点击:109收藏
-
「DeepSeek-V3 技术解析」:无辅助损失函数的负载均衡
编者按: 在混合专家模型(MoE)的实践中,负载不均衡俨然已成为制约模型性能提升的关键瓶颈之一。传统的均衡策略往往需要引入复杂的辅助损失函数,不仅增加了训练的复杂度,还可能干扰模型的核心学习目标。工程师们在提升模型效率的道路上,一直苦苦追寻着一个优雅而高效的平衡解决方案。 DeepSeek 团队的这项研究,为这一长期困扰业界的技术难题提供了令人耳目一新的解决...
时间:2025-04-02点击:180收藏
-
事务处理对持久统计信息自动收集的影响
事务处理对持久统计信息自动收集的影响 持久化统计信息 持久统计信息将统计信息存储到磁盘,使它们在服务器重启后保持不变,优化器更有可能在查询时做出一致的选择,从而提高执行计划的稳定性。 在innodb_stats_persistent=ON(默认值)或表定义使用 stats_persistent=1时,优化器统计信息会持久化保存。 持久统计信息存储在 mysq...
时间:2025-04-02点击:95收藏
-
RAG 调优指南:Spring AI Alibaba 模块化 RAG 原理与使用
作者:夏冬,Spring AI Alibaba Contributor RAG 简介 什么是 RAG(检索增强生成) RAG(Retrieval Augmented Generation,检索增强生成)是一种结合信息检索和文本生成的技术范式。 🌟 核心设计理念 RAG 技术就像给 AI 装上了「实时百科大脑」,通过先查资料后回答的机制,让 AI 摆脱传统模...
时间:2025-04-01点击:208收藏
-
Nacos 发布 MCP Registry,实现存量应用接口“0改动”升级到 MCP 协议
MCP 的发展速度之快,似乎超出了大部分人的想象。今年2月,Cursor、Windsurf、Cline 均开始引入 MCP,近日 OpenAI 宣布支持 MCP,国内百度地图、高德地图陆续发布 MCP Server,还有一众非常活跃的提供 MCP 托管和中间件服务的供应商,MCP 生态正呈现越加丰富和成熟的发展态势。 虽然 AI 在短期内依旧面临 ROI 的...
时间:2025-04-01点击:163收藏
点击排行
推荐阅读
最新文章
- MySQL数据库中FOR UPDATE的使用
- Red5直播服务器,属于Java语言的直播服务器
- Mario游戏-低调大师作品
- Docker容器配置,解决镜像无法拉取问题
- CentOS6,7,8上安装Nginx,支持https2.0的开启
- Windows10,CentOS7,CentOS8安装MongoDB4.0.16
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- SpringBoot2初体验,简单认识spring boot2并且搭建基础工程
- SpringBoot2整合Redis,开启缓存,提高访问速度


微信收款码
支付宝收款码