赛尔校园公共服务平台 Logo
平台使用
阿里云
百度云
移动云
智算服务
教育生态
登录 →
赛尔校园公共服务平台 Logo
平台使用 阿里云 百度云 移动云 智算服务 教育生态
登录
  1. 首页
  2. 阿里云
  3. 日志服务
  4. 操作指南
  5. 数据加工
  6. 数据加工(旧版)
  7. 数据加工语法
  8. 全局操作函数

全局操作函数

  • 数据加工语法
  • 发布于 2025-04-22
  • 0 次阅读
文档编辑
文档编辑

本文介绍日志服务提供的全局操作函数清单。日志服务LOG DSL(Domain Specific Language)提供近三十种全局操作函数,您可以在数据加工中通过全局操作函数控制加工逻辑。

全局操作函数列表如下表所示。

函数类型

函数

操作说明

流程控制函数

e_if

多个条件与操作组合。

e_if_else

根据条件判断的结果进行对应操作。

e_switch

条件与操作的组合。满足一个条件后,操作后跳出。

e_compose

组合一系列操作,并依次调用。

事件操作函数

e_drop

根据条件判断是否丢弃日志。

e_keep

根据条件判断是否保留日志。

e_split

基于日志字段的值分裂出多条日志,并且支持通过JMES提取字段后再进行分裂。

e_output

输出日志到指定的Logstore中,且对应的日志不再执行后面的加工规则。

e_coutput

输出日志到指定的Logstore中,且对应的日志继续执行后面的加工规则。

e_to_metric

将日志格式转化为时序存储(MetricStore)的格式。

字段操作函数

v

获得日志特定字段的值。

e_set

添加新字段或为现有字段设置新的字段值。

e_drop_fields

删除符合条件的日志字段。

e_keep_fields

保留符合条件的日志字段。

e_pack_fields

打包日志字段,并输出到新的字段中。

e_rename

重命名符合条件的日志字段名称。

字段值提取函数

e_regex

根据正则表达式提取字段的值并赋值给其他字段。

e_json

对特定字段中的JSON对象进行JSON操作,包括JSON展开、JMES提取或者JMES提取后再展开。

e_kv

通过quote提取多个源字段中的键值对信息。

e_kv_delimit

通过分隔符提取源字段中的键值对信息。

e_csv

使用默认分隔符半角逗号(,)提取多个字段。

e_tsv

使用默认分隔符tab \t提取多个字段。

e_psv

使用默认分隔符竖线(|)提取多个字段。

e_syslogrfc

根据Syslog协议由已知priority值计算出facility和severity,并且匹配相应的level信息。

e_anchor

使用定义的anchor_rules规则提取字符串。

映射富化函数

e_dict_map

在映射关系的字典中,根据输入的字段映射出一个新字段。

e_table_map

在映射表格中查找对应的行,根据输入的字段返回字段的值。

e_tablestore_map

以阿里云表格存储(Tablestore)作为维表数据对原始日志进行富化。

e_redis_map

以阿里云Redis作为维表数据对原始日志进行富化。

相关文章

语言简介 2025-04-22 10:54

日志服务语言SLS DSL(Domain Specific Language)是日志服务数据加工使用的与Python兼容的脚本。SLS DSL基于Python语言开发,提供两百多个内置函数来简化数据加工任务。 自由编排

数据结构 2025-04-22 10:54

本文介绍数据加工语法相关的数据结构及其说明。 基本数据结构 基本数据结构的不同类型和说明如下表所示:

基础语法 2025-04-22 10:54

本文介绍SLS DSL的基础语法。 注释 对语法进行解释说明,需要以井号(#)开头。示例

函数总览 2025-04-22 10:54

本文列举数据加工任务所涉及的所有函数。 全局操作函数

全局操作函数 2025-04-22 10:54

本文介绍日志服务提供的全局操作函数清单。日志服务LOG DSL(Domain Specific Language)提供近三十种全局操作函数,您可以在数据加工中通过全局操作函数控制加工逻辑。 全局操作函数列表如下表所示。

流程控制函数 2025-04-22 10:54

本文主要介绍流程控制函数的语法规则,包括参数解释、函数示例等。 函数列表

目录
Copyright © 2025 your company All Rights Reserved. Powered by 赛尔网络.
京ICP备14022346号-15
gongan beian 京公网安备11010802041014号