日志服务数据加工：语法框架与样例

2019-06-09 609

概述

目前数据加工全面支持ETL语言, 更简单灵活. 参考ETL语言介绍

1. 全局操作事件

1.1. 字段赋值(set event)

1.1.1. 语法介绍

语法：

SET_EVENT_新字段 = 固定值
SET_EVENT_新字段 = 表达式函数

说明

设置单个字段值，字段名为新字段，如果已经存在，则会覆盖现有字段值
新字段的字符约束是：中英文数字_组成，但不能以数字开头。注意：支持中文，但不支持:，因此不能通过这种方式设置日志的tag等，可以参考通用操作完成这类需求。
表达式函数返回无值None时，该操作会被忽略
表达式函数返回的任何类型的值都会被转化成字符串（例如，数字会被格式化为字符串，放回到事件中）
完整的表达式函数信息，请参考表达式函数

1.1.2. 样例

例子1：设置固定值
添加一个新字段city值为上海。

SET_EVENT_city = "上

微信关注我们

原文链接：https://yq.aliyun.com/articles/704938

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

日志服务数据加工：语法功能概述

自由编排通过一个Python兼容ETL语言进行自由编排，对各种逻辑进行复杂组合, 可以满足大部分数据加工的需求和自由度. 例如, 可以自由编排达到如下一个场景: 完整的加工功能支持近30种全局步骤函数, 支持通过各种参数调节行为, 且可以接受其他表达式函数的调用组合的结果作为参数, 其中控制的函数不仅可以搭配表达式函数, 也可以搭配其他步骤函数操作. 控制: 支持基于条件判断后的流程分支, 包括if-else, if条件-操作配对组合, switch分派, compose组合等场景. 借助e_search等简单搜索语法可以对不同类型日志进行灵活的加工. 事件操作: 支持对事件进行丢弃, 保留, 分裂, 输出, 复制等字段操作: 支持保留, 删除, 重命名字段等字段赋值: 支持基于任意表达式组合结果设置字段的值字段值提取: 支持基于正则

2019-06-10

644

如何实现一个低配版Spring BeanFactory？ @TOC 手机用户请横屏获取最佳阅读体验，REFERENCES中是本文参考的链接，如需要链接和更多资源，可以关注其他博客发布地址。平台地址 CSDN https://blog.csdn.net/sinat_28690417 简书 https://www.jianshu.com/u/3032cc862300 个人博客 https://yiyuery.club 结合Spring BeanFactory实例扫描和注入思想进行深入编码实战：工厂化管理运行中实例对象准备工作包扫描工具类定义 /* * @ProjectName: 编程学习 * @Copyright: 2019 HangZhou xiazhaoyang Dev, Ltd. All Right Reserved. * @address: http://xiazhaoyang.tech * @date: 2019/5/20 20:57 * @email: https:yiyuery.github.io/NoteBooks * @description: 本内容仅限于编程技...

2019-06-10

582

资源下载

更多资源

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。