笔记列表-低调大师优秀个人博客

文章列表

共 188948 篇

2025-04-02

突破极限: 高负载场景下的单机300M多行正则日志采集不是梦

作者：裘文成（翊韬）问题背景在当今数字化时代，日志数据已成为企业 IT 运营和业务分析的关键资源。然而，随着业务规模的扩大和系统复杂度的提升，日志数据的体量呈现爆发式增长，给日志采集和处理系统带来了巨大挑战。最近，我们遇到了一个典型案例，充分体现了当前日志服务采集在高负载场景下面临的困境，以下为客户现状：海量日志与正则采集：客户的某项业务产生了数量巨大...

230

阅读约23分钟

2025-04-02

Apache Parquet Avro格式反序列漏洞

漏洞描述 Apache Parquet Java是一个开源的工具，用于优化大规模数据处理。其中parquet-avro模块用于转换parquet格式与avro数据格式。在parquet-avro 1.15.0 及之前的版本中，AvroConverters.java中的FieldStringableConverter方法未对传入的stringableClas...

343

阅读约3分钟

2025-04-02

拉卡拉 x Apache Doris：统一金融场景 OLAP 引擎，查询提速 15 倍，资源直降 52%

导读：拉卡拉早期基于 Lambda 架构构建数据系统面临存储成本高、实时写入性能差、复杂查询耗时久、组件维护复杂等问题。为此，拉卡拉选择使用 Apache Doris 替换 Elasticsearch、Hive、Hbase、TiDB、Oracle / MySQL 等组件，实现了 OLAP 引擎的统一、查询性能提升 15 倍、资源减少 52% 的显著成效。拉...

255

阅读约19分钟

2025-04-02

虚拟线程/有栈协程对于Java的意义

本文探讨了虚拟线程（有栈协程）对Java的重要意义，从传统同步线程模型到异步响应式编程模型，再到用户线程模式和协程的实现原理，全面分析了Java在高并发场景下的演进历程。文章首先介绍了传统的thread per request模型，指出其资源占用高的问题，并引出异步编程模型的优势与弊端。接着对比了无栈协程（如Kotlin中的协程）和有栈协程（如Go中的gor...

413

阅读约58分钟

2025-04-02

大模型 Token 的消耗可能是一笔糊涂账

作者：望宸如果您正在部署大模型应用，务必提前和 CEO 打好预防针，大模型应用远不如 Web 应用在资源成本上那么可控。经典的 Web 应用，例如电商、游戏、出行、新能源、教育和医疗等，CPU 的消耗是可控的，和应用的在线人数和登陆时长成正相关，如果计算资源突增，可能是运营团队在做活动，也可能是预期外的突发流量，通过服务器弹性扩容后，稳定一段时间就会缩容...

372

阅读约17分钟

2025-04-02

【直播】基于昇腾的大模型创新应用和实践指南

随着大模型技术快速发展，其在自然语言处理、多模态交互等领域的应用逐渐深入产业场景。然而，开发者与企业落地大模型时仍面临算力需求高、推理效率不足、部署成本优化难等现实问题。昇腾AI基础软硬件平台通过异构计算架构、全场景AI框架等技术，为大模型开发与部署提供了高效支撑体系。 4月9日晚，开源中国OSCHINA 直播栏目【数智漫谈】将邀请具备一线开发经验的技术专家...

279

阅读约2分钟

2025-04-02

字符串替换研究

一、背景需求非常简单，给定一组关键词，需要将商品名称中出现过的关键字替换掉；如：skuName="HUAWEI Pura 70 Pro 国家补贴500元羽砂黑 12GB+512GB 超高速风驰闪拍华为鸿蒙智能手机" 需要替换成 skuName="HUAWEI Pura 70 Pro 羽砂黑 12GB+512GB 超高速风驰闪拍华为鸿蒙智能手机" 这...

290

阅读约32分钟

2025-04-02

待到山花烂漫时：鸿蒙开发者的个人感悟

序言：用代码浇灌春天，最终必将见证万紫千红的生态盛景。她说：“我愿在这时代盛开，我花开后百花杀” 吉林银行作为吉林省经济发展的 “金融引擎”，在数字化转型浪潮中勇立潮头。其开发团队通过分布式架构重构、ArkUI-X 框架迁移及原子化服务开发等技术突破，历时21个自然日完成 HarmonyOS NEXT 核心功能版本适配。今天让我们采访一下吉林银行的鸿蒙开发...

272

阅读约5分钟

2025-04-02

「DeepSeek-V3 技术解析」：无辅助损失函数的负载均衡

编者按：在混合专家模型（MoE）的实践中，负载不均衡俨然已成为制约模型性能提升的关键瓶颈之一。传统的均衡策略往往需要引入复杂的辅助损失函数，不仅增加了训练的复杂度，还可能干扰模型的核心学习目标。工程师们在提升模型效率的道路上，一直苦苦追寻着一个优雅而高效的平衡解决方案。 DeepSeek 团队的这项研究，为这一长期困扰业界的技术难题提供了令人耳目一新的解决...

419

阅读约21分钟

2025-04-02

事务处理对持久统计信息自动收集的影响

事务处理对持久统计信息自动收集的影响持久化统计信息持久统计信息将统计信息存储到磁盘，使它们在服务器重启后保持不变，优化器更有可能在查询时做出一致的选择，从而提高执行计划的稳定性。在innodb_stats_persistent=ON（默认值）或表定义使用 stats_persistent=1时，优化器统计信息会持久化保存。持久统计信息存储在 mysq...

258

阅读约43分钟

2025-04-01

RAG 调优指南：Spring AI Alibaba 模块化 RAG 原理与使用

作者：夏冬，Spring AI Alibaba Contributor RAG 简介什么是 RAG（检索增强生成） RAG（Retrieval Augmented Generation，检索增强生成）是一种结合信息检索和文本生成的技术范式。 🌟 核心设计理念 RAG 技术就像给 AI 装上了「实时百科大脑」，通过先查资料后回答的机制，让 AI 摆脱传统模...

418

阅读约38分钟

2025-04-01

Nacos 发布 MCP Registry，实现存量应用接口“0改动”升级到 MCP 协议

MCP 的发展速度之快，似乎超出了大部分人的想象。今年2月，Cursor、Windsurf、Cline 均开始引入 MCP，近日 OpenAI 宣布支持 MCP，国内百度地图、高德地图陆续发布 MCP Server，还有一众非常活跃的提供 MCP 托管和中间件服务的供应商，MCP 生态正呈现越加丰富和成熟的发展态势。虽然 AI 在短期内依旧面临 ROI 的...

307

阅读约25分钟

2025-04-01

国产化替代是个伪命题？被误解多年的开源软件，如今怎么样了？

大家好，我是陈哥。最近，我们刚推出了《禅道国产化替代方案2.0》，正巧与一位互联网行业的朋友聊到国产化替代与开源软件。他说：国产化替代是个伪命题。很多产品不过是在国外开源软件上套皮，这和直接使用国外技术有什么区别？他的话确实是很多人的疑虑，当前业界也一直存在着对开源软件安全性的争议。任正非曾说：“不要重复发明轮子，要站在巨人的肩膀上创新。”实际上，国产化...

267

阅读约6分钟

2025-04-01

函数计算支持热门 MCP Server 一键部署

全球 AI 开发者们热议"MCP"（Model Context Protocol）。尽管这一协议在2024年由Anthropic发布时并未引起广泛关注，但2025年初，Cursor宣布集成MCP迅速将其带入开发者的视野，3月Manus的爆发更是加速了MCP的普及。而就在3月27日，OpenAI正式宣布其Agent SDK全面支持MCP协议，这一举措标志着MC...

350

阅读约17分钟

2025-04-01

先锋集结 | Elastic Pioneer 先锋者计划启动，快来加入！

💡搜索技术江湖的隐藏“扫地僧”，是时候出山了！15年技术积累的Elasticsearch为你搭建了Elastic Pioneer 先锋者计划舞台，赶紧站上C位，书写你的江湖传说！是大神就现在证明！📌扫码上传你的Elasticsearch神操作（演讲 | 文章 | 代码 | 解决方案等贡献，赢取Pioneer积分）🏆月度榜单刷新江...

252

阅读约2分钟

2025-04-01

分布式数据一致性场景与方案处理分析｜得物技术

一、引言在经典的CAP理论中一致性是指分布式或多副本系统中数据在任一时刻均保持逻辑与物理状态的统一，这是确保业务逻辑正确性和系统可靠性的核心要素。在单体应用单一数据库中可以直接通过本地事务(ACID)保证数据的强一致性。然而随着微服务架构的普及和业务场景的复杂化，原来的原子性操作会随着系统拆分而无法保障原子性从而产生一致性问题，但业务实际又需要保障一致性...

353

阅读约15分钟

2025-04-01

想让你多爱自己一些的开源计时器

我用过 Pomotroid、Reminders MenuBar、Timer 等众多优秀、开源的番茄时钟和计时工具，它们帮我更高效地管理时间，让我更专注地投入工作。但有一个问题始终困扰着我：每当计时结束时，我总是习惯性地忽略休息提醒，继续沉浸在手头的事情中，直到第二天身体不适才追悔莫及。最近，我发现了一款特别贴心的开源计时工具------Catime。它体...

829

阅读约13分钟

2025-03-31

MCP 是 USB，但 ANP 可能是 HTTP

MCP 火了！ MCP（Model Context Protocol ，模型上下文协议）是一个由 Anthropic 发布的开放协议，使 LLM 应用能够与外部数据源和工具无缝集成。无论是构建AI驱动的IDE、增强聊天界面，还是创建自定义AI工作流，MCP都提供了一种标准化方式，将LLM与所需的上下文连接起来。在模型调用工具资源方面已经成为行业事实标准。几...

343

阅读约6分钟

2025-03-31

Databend 产品月报（2025年3月）

很高兴为您带来 Databend 2025 年 3 月的最新更新、新功能和改进！我们希望这些增强功能对您有所帮助，并期待您的反馈。仪表盘共享您现在可以在 Databend Cloud 上与组织内的所有人或特定个人共享您的仪表盘，并选择以下权限级别之一来控制他人对其的访问方式：只读（Read Only）：查看仪表盘，但无法进行更改或运行查询以获取最新...

329

阅读约16分钟

2025-03-31

业务复杂度治理方法论--十年系统设计经验总结

作者：京东物流尹昊喆一、复杂度综述 1、什么是复杂度软件设计的核心在于降低复杂性。 --《软件设计的哲学》业界对于复杂度并没有统一的定义，斯坦福教授John Ousterhout从认知负担和工作量方面给出了一个复杂度量公式子模块的复杂度cp乘以该模块对应的开发时间权重值tp，累加后得到系统的整体复杂度C 这里的子模块复杂度cp是一个经...

343

阅读约14分钟

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。

文章列表

突破极限: 高负载场景下的单机300M多行正则日志采集不是梦

Apache Parquet Avro格式反序列漏洞

拉卡拉 x Apache Doris：统一金融场景 OLAP 引擎，查询提速 15 倍，资源直降 52%

虚拟线程/有栈协程对于Java的意义

大模型 Token 的消耗可能是一笔糊涂账

【直播】基于昇腾的大模型创新应用和实践指南

字符串替换研究

待到山花烂漫时：鸿蒙开发者的个人感悟

「DeepSeek-V3 技术解析」：无辅助损失函数的负载均衡

事务处理对持久统计信息自动收集的影响

RAG 调优指南：Spring AI Alibaba 模块化 RAG 原理与使用

Nacos 发布 MCP Registry，实现存量应用接口“0改动”升级到 MCP 协议

国产化替代是个伪命题？被误解多年的开源软件，如今怎么样了？

函数计算支持热门 MCP Server 一键部署

先锋集结 | Elastic Pioneer 先锋者计划启动，快来加入！

分布式数据一致性场景与方案处理分析｜得物技术

想让你多爱自己一些的开源计时器

MCP 是 USB，但 ANP 可能是 HTTP

Databend 产品月报（2025年3月）

业务复杂度治理方法论--十年系统设计经验总结

资源下载

Mario

腾讯云软件源

Sublime Text

WebStorm

欢迎您来访！