You need to enable JavaScript to run this app.
文档中心
文件存储 vePFS

文件存储 vePFS

复制全文
下载 pdf
数据流动
创建手动任务
复制全文
下载 pdf
创建手动任务
手动任务为通过控制台或 OpenAPI 手动创建的数据流动任务。本文介绍在 vePFS 控制台上创建手动任务的操作步骤。​
前提条件​
  • 已在文件系统中创建数据流动的目录,可为 Fileset 或子目录,若为 Fileset,请先创建 Fileset。具体步骤,请参见创建 Fileset。​
  • 已创建数据流动的 TOS 桶。具体步骤,请参见创建存储桶。​
注意事项​
  • 配置的 Fileset(子目录)或目录、前缀不能与其他手动任务(状态为创建中、运行中或取消中)中的配置存在嵌套。​
  • 请确认手动输入目录的准确性,若目录不存在则会直接创建该目录。​
操作步骤​
  1. 在顶部菜单栏,选择目标文件系统所在地域。​
  1. 在左侧导航栏,选择文件系统 > 文件系统列表。​
  1. 在文件系统列表页面,单击目标文件系统名称。​
  1. 在文件系统概览页,单击数据流动页签。​
  1. 在数据流动页签,选择数据流动任务 > 手动任务页签。​
  1. 在手动任务页面,单击创建任务。​
  1. 在创建数据流动任务页面,设置如下参数。​
  • 数据流动路径​
  • ​
    参数​
    说明​
    配置路径​
    选择自定义配置路径,手动填写文件存储路径与对象存储路径信息。​
    ​
  • 文件存储路径​
  • ​
    参数​
    说明​
    文件系统 ID​
    创建数据流动任务的 vePFS 文件系统 ID,系统自动填充,不支持修改。​
    文件系统路径​
    设置当前文件系统中需要进行数据流动的路径,您可以选择 Fileset 或目录,并按需设置子目录。​
    说明​
    Fileset 具备文件数量 Quota、性能 QoS 配置等能力,推荐您选择 Fileset。​
    • 若不设置子目录则指定进行数据流动的路径为文件系统根目录或 Fileset。​
    • 如需设置子目录,子目录约束限制如下:​
    注意​
    请确认手动输入目录路径的准确性,若目录不存在会直接创建该目录。​
    • 输入子目录在文件系统中的绝对路径,必须以正斜线(/)开头和结尾。​
    • 只能包含字母、数字、半角句号(.)、下划线(_)、中划线(-)或正斜线(/)。​
    • 路径字符串总长度应小于 1024 个字符,子路径单个字符串长度小于 255 个字符。​
    • 不能与其他任务(状态为创建中、运行中或取消中)中的 Flieset (子目录)或文件系统目录存在嵌套。​
    ​
  • 对象存储路径​
  • ​
    参数​
    说明​
    TOS 桶​
    选择关联的 TOS 存储桶,可以选择与当前文件系统处于相同地域的 TOS 存储桶。​
    说明​
    • 界面上自动展示所选存储桶的版本控制功能开启状态,若状态为未开启或暂停,您可以单击设置,启用所选存储桶的版本控制功能,具体操作步骤,请参见开启和暂停版本控制。​
    • 建议在所选 TOS 存储桶中开启版本控制功能,当桶内文件被覆盖时,可通过版本控制功能,将文件恢复至任意历史版本。​
    TOS 桶前缀​
    在所选 TOS 存储桶中,指定与文件系统进行数据流动的前缀,约束限制如下:​
    • 必须以正斜线(/)开头和结尾。​
    • 不能包含两个正斜线(//)。​
    • 长度需要在 3 ~ 1024 个字符内。​
    • 不能与其他策略或手动任务(状态为创建中、运行中或取消中)中的前缀存在嵌套。​
    说明​
    若不设置,则默认使用桶根目录。​
    ​
  • 数据流动任务:任务类型支持预热、沉降、删除及对账,各任务参数说明如下。​
  • 预热:将对象存储数据导入 vePFS 文件系统。​
  • ​
    参数​
    说明​
    同名文件冲突策略​
    设置在数据流动过程中,对文件系统和 TOS 存储桶中同名文件的处理方式,可选方式如下:​
    • 保持最新文件:比较两者最后修改时间,保留最新版本。若两者最后修改时间相同,则跳过同名文件。​
    • 跳过同名文件:跳过同名文件,对目标侧同名文件不做处理。​
    • 覆盖同名文件:使用待预热的文件覆盖对端的同名文件。​
    数据类型​
    默认选择元数据和数据,即同时预热元数据和数据。​
    ​
  • 沉降:将 vePFS 文件系统数据导出到对象存储。​
  • ​
    参数​
    说明​
    同名文件冲突策略​
    设置在数据流动过程中,对文件系统和 TOS 存储桶中同名文件的处理方式,可选方式如下:​
    • 保持最新文件:比较两者最后修改时间,保留最新版本。若两者最后修改时间相同,则跳过同名文件。​
    • 跳过同名文件:跳过同名文件,对目标侧同名文件不做处理。​
    • 覆盖同名文件:使用待沉降的文件覆盖对端的同名文件。​
    软链接处理策略​
    设置在数据流动过程中,对软连接的处理方式,可选方式如下:​
    • 跳过软链接文件:软链接文件将不会导出到对象存储。​
    • 导出为独立文件:将软链接文件作为实际文件导出至 TOS,并作为独立的文件存储,与源文件无链接关系。​
    数据类型​
    默认选择元数据和数据,即同时沉降元数据和数据。​
    ​
  • 删除:删除 vePFS 文件系统内或与对象存储关联的文件。​
警告​
删除文件属于高危操作,将同时删除元数据和数据,且删除后不可恢复,建议您提前沉降需要保留的数据至对象存储。​
  • ​
    参数​
    说明​
    删除范围​
    您可以选择需要删除的文件范围,可选范围如下:​
    • 仅删除文件系统内的文件​
    • 同时删除文件系统和对象存储内的关联文件​
    • 对象存储启动版本控制时,删除关联对象的最新版本​
    • 对象存储启动版本控制时,删除关联对象的所有版本(彻底删除),不可恢复​
    说明​
    删除文件属于高危操作,将强制开启日志分析功能。​
    数据类型​
    默认选择元数据和数据,即同时删除元数据和数据。​
    ​
  • 对账:仅针对文件系统与对象存储设定目录内的文件进行对账,不执行任何文件的导入导出动作。​
  • ​
    参数​
    说明​
    数据类型​
    默认选择元数据和数据。​
    ​
  • 设置文件筛选条件:选择执行数据流动的任任务的数据范围。​
  • ​
    参数​
    说明​
    筛选范围​
    可选范围为所有文件、指定文件列表和指定筛选条件。具体说明如下:​
    • 所有文件:将对配置路径内的所有文件执行数据流动任务。​
    • 指定文件列表:将对文件列表内所列出的文件执行数据流动任务。​
    • 指定筛选条件:将对符合指定筛选条件的所有文件执行数据流动任务。​
    说明​
    不同任务类型的可选筛选范围不同,请以控制台显示为准。​
    指定文件列表​
    当任务类型为预热、沉降或删除,且筛选范围为指定文件列表时,你需要选择指定文件列表类型,可选择的文件列表如下:​
    • 上传文件列表:单击点击上传 txt 文件,上传包含多个前缀的 .txt 文件,导入此文件中列出的所有文件。​
    • 使用 TOS 中的文件列表:输入对象存储中的文件路径,导入此文件中列出的所有文件。​
    说明​
    • 预热、沉降和删除任务中,会执行文件列表中列出的所有文件以及列出的子目录下的所有文件,子目录要求以正斜线(/)开头和结尾。​
    • 文件中列出的前缀要求如下:​
    • 预热任务:​
    • 为对象存储路径中指定的 TOS 桶前缀的子前缀。​
    • 填写不包含 TOS 桶名称的完整前缀。​
    • 不同前缀之间使用回车键隔开。​
    • 沉降和删除任务:​
    • 为文件存储路径中指定 Fileset 或目录的子目录。​
    • 若为 Fileset 子目录,填写 Fileset 路径 + 子目录路径,否则,请填写目录在文件系统中的绝对路径。​
    筛选规则​
    当任务类型为沉降或删除,且筛选范围为指定筛选条件时,您需要配置筛选规则,可选筛选条件如下:​
    • 整个目录:您可以选择不包含文件系统根目录下的某个目录,约束限制如下:​
    • 该目录必须为数据流动策略数据源路径下的子目录。​
    • 必须输入目录在文件系统中的绝对路径,以正斜线(/)开头和结尾。​
    • 父目录必须是已存在的目录,路径深度最多为 8 级。​
    • 最多可添加 20 个目录。​
    • 最后访问时间:您可以在时间选框指定一个最后访问时间,筛选该时间之前的文件。​
    ​
  • 日志分析:开启日志分析功能后,您可以对该数据流动任务的数据流动记录进行实时查询分析。​
  • 任务类型为预热或沉降时,您可以选择是否开启日志分析功能;任务类型为删除时,将强制开启日志分析功能;任务类型为对账时,不支持使用此功能。​
  • 开启此功能需要开通日志服务并授权文件存储 vePFS 访问日志服务。具体操作,请分别参见概述和跨服务授权。​
说明​
日志分析功能本身不收费,开启后涉及的日志服务用量由日志服务单独收费,收费详情请参见计费概述。​
  1. 单击确定,保存当前数据流动任务。​
配置任务状态变更通知​
云监控的事件中心提供了监控 vePFS 数据流动任务状态变更的能力。您可以在云监控事件中心创建一个事件规则,用于监控数据流动任务的状态变更事件,一旦任务状态变更触发该事件,云监控会通过您配置的告警渠道,将事件信息发送给指定的联系人或联系组。具体操作,请参见使用事件中心。​
说明​
创建事件规则时,资源类型请选择文件存储 vePFS。​
最近更新时间:2026.06.26 15:52:59
这个页面对您有帮助吗?
有用
有用
无用
无用