• 数据加工(新版)概述 2025-04-22 10:55

    日志服务提供可托管、可扩展、高可用的数据加工(新版)服务。数据加工(新版)服务可应用于数据规整与信息提取、数据清洗与过滤、数据分发至多目标Logstore等数据处理场景。 加工原理 日志服务提供的数据加工(新版)功能,通过托管实时数据消费的任务,结合日志服务SPL规则消费功能,实现对日志数据的实时加

  • 授权 2025-04-22 10:55

    您使用数据加工功能时,涉及数据加工操作权限和数据访问权限。 如果您使用的是阿里云账号,直接执行加工任务访问数据授权。

  • 快速入门 2025-04-22 10:55

    本文以网站访问日志为例,为您介绍完整的数据加工流程,帮助您快速熟悉数据加工功能及其操作。 准备工作 已创建名为web-project的Project。具体操作,请参见管理Project。

  • 创建数据加工(新版)任务 2025-04-22 10:55

    日志服务支持您使用数据加工(新版)功能,基于SPL规则消费源Logstore中的数据,并将SPL规则处理结果写入到的目标Logstore中。您也可以对加工后的数据进行查询和分析,进一步发掘数据价值。本文介绍如何在日志服务控制台上创建数据加工任务。 前提条件 已采集数据到日志服务。

  • 升级到数据加工(新版) 2025-04-22 10:55

    本文主要介绍如何将数据加工(旧版)升级到数据加工(新版)。 升级概述 如果您已有运行中的数据加工(旧版)任务,可以升级至数据加工(新版),任务升级过程说明: 数据加工服务为保证数据的完整性,自动将当前的数据消费点位迁移至数据加工(新版),升级后将从该点位继续消费数据。<

  • 升级SPL规则语法对照 2025-04-22 10:55

    本文主要介绍数据加工(旧版)和数据加工(新版)规则语法的对比。 日志服务SPL语言在数据处理场景下与SQL的使用对照请参考SPL与SQL的使用场景对照。 数据同步(无需处理逻辑)