赛尔校园公共服务平台 Logo
平台使用
阿里云
百度云
移动云
智算服务
教育生态
登录 →
赛尔校园公共服务平台 Logo
平台使用 阿里云 百度云 移动云 智算服务 教育生态
登录
  1. 首页
  2. 阿里云
  3. 日志服务
  4. 操作指南
  5. 数据加工
  6. 数据加工(新版)
  7. 管理数据加工(新版)任务

管理数据加工(新版)任务

  • 数据加工(新版)
  • 发布于 2025-04-22
  • 0 次阅读
文档编辑
文档编辑

本文介绍如何在日志服务控制台上管理数据加工(新版)任务,包括查看任务详情与状态,修改、启动、暂停和删除任务。

查看任务详情

  1. 登录日志服务控制台。

  2. 在Project列表区域,单击目标Project。

    image

  3. 在左侧导航栏中,选择任务管理 > 数据加工。

  4. 在加工任务列表中,单击目标加工任务。

  5. 在数据加工概览(新版)页面,查看加工任务详情。

    image

    配置项

    说明

    显示名称

    数据加工任务显示名称,用于任务说明等。

    任务名称

    数据加工任务名称,Project下唯一。

    任务ID

    数据加工任务ID。

    源日志库

    进行数据加工的Logstore。

    任务状态

    数据加工任务的状态。更多信息,请参见ETL。

    任务创建时间

    创建数据加工规则的时间。

    任务修改时间

    修改数据加工规则的时间。

    加工范围(数据接收时间)

    创建数据加工任务时,设置的数据加工时间范围。

    存储目标

    数据加工处理结果写入目标,包括目标名称、用于存储数据加工结果的目标Project名称和目标Logstore名称、以及写入每一个目标的结果集。

查看任务状态

您可以在数据加工概览(新版)页面查看任务运行状态。数据加工任务运行生命周期和任务状态,跟任务配置和操作相关,请参见ETL。数据加工任务运行的终态和重启行为如下:

  • 如果加工任务没有配置处理终点时间(数据接收时间),则加工任务不会停止,运行实例将持续消费,保持运行中状态。

  • 如果加工任务配置了处理终点时间(数据接收时间),在处理完成该时间点之前写入的所有数据后,运行实例自动退出。所有运行实例都运行完成后,加工任务转为运行成功状态。

  • 当任务被暂停处于已暂停状态,或者运行时遇到非法SPL等情况处于运行错误状态时,再次启动后,将从上次退出时保存的消费点位继续消费。

暂停任务

对于状态为运行中的任务,在数据加工概览(新版)页面,选择操作 > 停止。

重要

停止任务会保存当前的加工位置,如果任务再次启动会从停止的位置继续加工。如果需要从配置的时间范围重新开始执行,请参见重新执行。

启动任务

对于状态为已暂停的任务,在数据加工概览(新版)页面,单击启动。

修改加工规则

重要

修改数据加工(新版)任务将重新启动运行中的任务,以应用变更后的最新任务配置。

  1. 在数据加工概览(新版)页面,单击修改规则。

  2. 根据需求,修改数据加工规则。

    关于规则语法的更多信息,请参见SPL指令。

  3. 预览数据。

    1. 在原始数据页签中单击加入测试数据,或者在测试数据页签中,手动输入测试数据。

      image

    2. 点击image按钮,执行调试运行,详情请参考调试SPL规则。

  4. 单击修改加工配置。

  5. 修改数据加工配置,然后单击确定。

    相关参数说明,请参见创建数据加工任务。

删除任务

警告

删除数据加工任务后,不可恢复,请谨慎删除。

如果您要删除数据加工任务,请参见如下方法。

  • 在数据加工列表中,选择目标加工任务后的更多操作 > 删除,删除当前任务。

  • 在数据加工概览(新版)页面,选择操作 > 删除。

重新执行

在任何状态的任务都支持重新执行。在数据加工概览(新版)页面,选择操作 > 重新执行。

重要

重新执行操作将从任务配置的消费起始时间点开始处理数据,而不是从加工当前的消费点位继续处理。

相关文章

数据加工(新版)概述 2025-04-22 10:55

日志服务提供可托管、可扩展、高可用的数据加工(新版)服务。数据加工(新版)服务可应用于数据规整与信息提取、数据清洗与过滤、数据分发至多目标Logstore等数据处理场景。 加工原理 日志服务提供的数据加工(新版)功能,通过托管实时数据消费的任务,结合日志服务SPL规则消费功能,实现对日志数据的实时加

数据加工新旧版本对比与升级 2025-04-22 10:55

本文介绍数据加工(新版)与数据加工(旧版)服务的差异,以及如何选择数据加工(新版)与数据加工(旧版)。 新旧版本对比

授权 2025-04-22 10:55

您使用数据加工功能时,涉及数据加工操作权限和数据访问权限。 如果您使用的是阿里云账号,直接执行加工任务访问数据授权。

快速入门 2025-04-22 10:55

本文以网站访问日志为例,为您介绍完整的数据加工流程,帮助您快速熟悉数据加工功能及其操作。 准备工作 已创建名为web-project的Project。具体操作,请参见管理Project。

创建数据加工(新版)任务 2025-04-22 10:55

日志服务支持您使用数据加工(新版)功能,基于SPL规则消费源Logstore中的数据,并将SPL规则处理结果写入到的目标Logstore中。您也可以对加工后的数据进行查询和分析,进一步发掘数据价值。本文介绍如何在日志服务控制台上创建数据加工任务。 前提条件 已采集数据到日志服务。

管理数据加工(新版)任务 2025-04-22 10:55

本文介绍如何在日志服务控制台上管理数据加工(新版)任务,包括查看任务详情与状态,修改、启动、暂停和删除任务。 查看任务详情

目录
Copyright © 2025 your company All Rights Reserved. Powered by 赛尔网络.
京ICP备14022346号-15
gongan beian 京公网安备11010802041014号