赛尔校园公共服务平台 Logo
平台使用
阿里云
百度云
移动云
智算服务
教育生态
登录 →
赛尔校园公共服务平台 Logo
平台使用 阿里云 百度云 移动云 智算服务 教育生态
登录
  1. 首页
  2. 阿里云
  3. 对象存储
  4. 操作指南
  5. 数据湖管理
  6. OSS-HDFS服务
  7. 服务概述
  8. 使用前须知

使用前须知

  • 服务概述
  • 发布于 2025-04-21
  • 0 次阅读
文档编辑
文档编辑

开通OSS-HDFS服务前,请了解其与OSS其他功能的关系,以避免出现使用问题或者数据丢失。

警告

当您为某个Bucket开通OSS-HDFS服务后,OSS-HDFS服务数据将保留在Bucket的.dlsdata/目录下。禁止以非OSS-HDFS提供的方式对该目录及其下的Object执行写入操作,如重命名、删除等,以避免影响服务或数据丢失。

以下是开通OSS-HDFS服务后,涉及.dlsdata/目录的操作风险和注意事项:

其他功能

风险

说明

相关文档

保留策略

数据无法删除

不建议在同一Bucket中同时开通OSS-HDFS服务并设置保留策略。否则,通过OSS-HDFS删除.dlsdata/目录数据时,虽提示删除成功,但保留策略有效期内数据仍会被保留,且策略失效后也无法清理该目录下的相关数据。

保留策略(WORM)

生命周期

数据丢失

如果为开通了OSS-HDFS服务的Bucket设置或更新生命周期规则,请通过NOT元素排除.dlsdata/目录,避免生命周期规则触发的删除或存储类型转换影响OSS-HDFS数据的正常读写。

lifecycle

开通OSS-HDFS服务后,如果您需要对HDFS存储的数据进行生命周期管理,请使该服务的冷热分层存储功能。

  • 基于最后一次修改时间的生命周期规则

  • 基于最后一次访问时间的生命周期规则

  • 使用冷热分层存储

版本控制

数据无法自动删除、服务异常

同一Bucket禁止同时开通OSS-HDFS服务和版本控制,否则可能导致OSS-HDFS服务异常。为确保服务稳定性,请尽快暂停版本控制,并配置生命周期规则清理删除标记。

  • 同时开通OSS-HDFS服务和版本控制的Bucket如何处理?

  • 版本控制

  • 在开启版本控制的Bucket中删除Object

  • 版本控制相关操作

删除目录

数据丢失

为避免影响OSS-HDFS服务正常使用或导致数据丢失风险,禁止删除开通了OSS-HDFS服务的Bucket中的数据存储目录.dlsdata/及其子目录。

删除目录

删除Object

数据丢失

为避免影响OSS-HDFS服务的正常使用或者引发数据丢失的风险,禁止删除开通了OSS-HDFS服务的Bucket中的数据存储目录.dlsdata/下的任意Object。

删除Object

重命名Object

数据丢失

为避免影响OSS-HDFS服务正常使用或导致数据丢失,禁止重命名开通了OSS-HDFS服务的Bucket中.dlsdata/目录下的任意Object。

重命名Object

上传Object

数据丢失

为避免影响OSS-HDFS服务正常使用或引发数据丢失风险,禁止通过非OSS-HDFS方式在.dlsdata/目录中上传Object。

简单上传

修改Object存储类型

数据无法访问、计费规则变化

对于开通了OSS-HDFS服务的Bucket,建议不要修改.dlsdata/目录下Object的存储类型。

  • 如果将存储类型改为低频,数据仍可通过OSS-HDFS正常访问。

  • 如果改为归档、冷归档或深度冷归档,数据将无法通过OSS-HDFS访问,需先解冻数据后方可访问。

  • 修改为低频、归档等类型时,Object将涉及最小计量空间(64 KB)、最短存储周期及数据取回费用等限制。

请谨慎操作,以免影响数据访问或产生额外费用。

  • 修改文件存储类型

  • 存储类型转换注意事项

  • 解冻Object

Bucket Policy

数据无法访问、数据无法自动删除,持续计费

为确保OSS-HDFS服务用户能正常访问.dlsdata/目录及其下的任意Object,在为开通了OSS-HDFS服务的Bucket配置Bucket Policy时,禁止设置拒绝访问的授权操作。

Bucket Policy

访问控制RAM

数据无法访问、数据无法自动删除,持续计费

开通Bucket的OSS-HDFS服务时,默认自动创建角色AliyunOSSDlsDefaultRole,并关联权限策略AliyunOSSDlsRolePolicy。为确保用户正常访问.dlsdata/目录及其下的Object,禁止禁用、修改或删除该角色及关联的权限策略。

开通OSS-HDFS服务

Bucket清单

数据污染

为避免影响OSS-HDFS服务正常使用或引发数据污染风险,在开通了OSS-HDFS服务的Bucket设置清单报告规则时,禁止将清单报告目录设置为.dlsdata/。

存储空间清单

日志转存

数据污染

为避免影响OSS-HDFS服务的正常使用或者引发数据污染的风险,在开通了OSS-HDFS服务的Bucket中设置日志转存规则时,禁止将日志前缀填写为.dlsdata/。

设置日志转存

ZIP包解压

数据污染、数据丢失

为避免影响OSS-HDFS服务的正常使用或者引发数据污染、数据丢失的风险,在开通了OSS-HDFS服务的Bucket中配置ZIP包解压规则时,禁止将目标目录填写为.dlsdata/。

ZIP包解压

重要

OSS-HDFS服务会使用OSS Bucket存储HDFS数据及其辅助数据,这些数据均存储于Bucket中的.dlsdata/路径下,并产生相应的OSS存储容量的计量和计费。更多信息,请参见存储空间占用情况。

相关文章

什么是OSS-HDFS服务 2025-04-21 18:16

OSS-HDFS服务(JindoFS服务)是一个云原生数据湖存储功能。基于统一的元数据管理能力,完全兼容HDFS文件系统接口,满足大数据和AI等领域的数据湖计算场景。 注意事项

使用前须知 2025-04-21 18:16

开通OSS-HDFS服务前,请了解其与OSS其他功能的关系,以避免出现使用问题或者数据丢失。 警告

功能支持情况 2025-04-21 18:16

本文介绍OSS-HDFS服务的功能支持情况。 说明 以下表格中OSS-HDFS服务功能支持情况标注为不适用,表明对应操作仅针对OSS对象,而非OSS-HDFS文件。

存储空间占用情况 2025-04-21 18:16

OSS-HDFS服务使用OSS Bucket存储HDFS数据及其辅助数据,这些数据均存储于Bucket中的.dlsdata/ 路径下,并产生相应的OSS存储容量的计量和计费。 OSS-HDFS文件数据块block OSS-HDFS文件的所有数据块block均占用OSS Bu

目录
Copyright © 2025 your company All Rights Reserved. Powered by 赛尔网络.
京ICP备14022346号-15
gongan beian 京公网安备11010802041014号