You need to enable JavaScript to run this app.
文档中心
文件存储 vePFS

文件存储 vePFS

复制全文
下载 pdf
数据流动
数据流动目录配置示例
复制全文
下载 pdf
数据流动目录配置示例
本文介绍创建数据流动任务时目录配置的典型示例供您参考。​
预热任务​
通过配置目录预热​
  • 假定配置前提:​
  • vePFS 在客户端节点挂载目录为/mnt/vepfs。​
  • 数据流动路径已按照如下配置:​
  • 文件系统路径配置:/dataset。​
  • 对象存储路径配置:/bucket/prefix。​
  • 预热任务完成前后的文件路径:​
  • 对象存储侧待预热的文件路径如下:​
  • ​
    /bucket/prefix/a/b/c/file-001​
    ​
  • 预热任务完成后,预热文件在 vePFS 客户端节点的文件路径如下:​
  • ​
    /mnt/vepfs/dataset/a/b/c/file-001​
    ​
通过文件列表预热​
  • 假定配置前提:​
  • vePFS 在客户端节点挂载目录为/mnt/vepfs。​
  • 数据流动路径已按照如下配置:​
  • 文件系统路径配置:/dataset。​
  • 对象存储路径配置:/bucket/prefix。​
  • 预热任务完成前后的文件路径:​
  • 对象存储侧待预热的文件路径如下:​
  • ​
    /bucket/prefix/a/b/c/file-001​
    /bucket/prefix/a/b/c/file-002​
    /bucket/prefix/a/b/c/file-003​
    ​
  • 待预热文件的文件列表按如下格式填写:​
  • ​
    prefix/a/b/c/file-001​
    prefix/a/b/c/file-002​
    prefix/a/b/c/file-003​
    ​
  • 预热任务完成后,预热文件在 vePFS 客户端节点的文件路径如下:​
  • ​
    /mnt/vepfs/dataset/a/b/c/file-001​
    /mnt/vepfs/dataset/a/b/c/file-002​
    /mnt/vepfs/dataset/a/b/c/file-003​
    ​
沉降任务​
通过配置目录沉降​
  • 假定配置前提:​
  • vePFS 在客户端节点挂载目录为/mnt/vepfs。​
  • 数据流动路径已按照如下配置:​
  • 文件系统路径配置:/dataset。​
  • 对象存储路径配置:/bucket/prefix。​
  • 沉降任务完成前后的文件路径:​
  • vePFS 中待沉降的文件路径如下:​
  • ​
    /mnt/vepfs/dataset/a/b/c/file-001​
    ​
  • 沉降任务完成后,沉降文件在对象存储侧的文件路径如下:​
  • ​
    /bucket/prefix/a/b/c/file-001​
    ​
通过文件列表沉降​
  • 假定配置前提:​
  • vePFS 在客户端节点挂载目录为/mnt/vepfs。​
  • 数据流动路径已按照如下配置:​
  • 文件系统路径配置:/dataset。​
  • 对象存储路径配置:/bucket/prefix。​
  • 沉降任务完成前后的文件路径:​
  • 待沉降文件的文件列表按如下格式填写:​
  • ​
    /dataset/a/b/c/file-001​
    /dataset/a/b/c/file-002​
    /dataset/a/b/c/file-003​
    ​
  • 沉降完成后,沉降文件在对象存储侧对应的文件路径如下:​
  • ​
    /bucket/prefix/a/b/c/file-001​
    /bucket/prefix/a/b/c/file-002​
    /bucket/prefix/a/b/c/file-003​
    ​
删除任务​
仅删除文件系统内的文件​
通过配置目录删除​
  • 假定配置前提:​
  • vePFS 在客户端节点挂载目录为/mnt/vepfs。​
  • 数据流动路径已按照如下配置:​
  • 文件系统路径配置:/dataset。​
  • 对象存储路径配置:/bucket/prefix。​
  • vePFS 以下路径中的文件将被删除:​
  • ​
    /mnt/vepfs/dataset/​
    ​
  • 对象存储中的文件不会被删除。​
通过文件列表删除​
  • 假定配置前提:​
  • vePFS 在客户端节点挂载目录为/mnt/vepfs。​
  • 数据流动路径已按照如下配置:​
  • 文件系统路径配置:/dataset。​
  • 对象存储路径配置:/bucket/prefix。​
  • 待删除文件的文件列表按如下格式填写:​
  • ​
    /dataset/a/b/c/file-001​
    /dataset/a/b/c/file-002​
    /dataset/a/b/c/file-003​
    ​
  • 对象存储中的文件不会被删除。​
同时删除文件系统和对象存储内的关联文件​
通过配置目录删除​
  • 假定配置前提:​
  • vePFS 在客户端节点挂载目录为/mnt/vepfs。​
  • 数据流动路径已按照如下配置:​
  • 文件系统路径配置:/dataset。​
  • 对象存储路径配置:/bucket/prefix。​
  • vePFS 中待删除文件的文件路径如下:​
  • ​
    /mnt/vepfs/dataset/a/b/c/file-001​
    ​
  • 对应对象存储中待删除文件的文件路径如下:​
  • ​
    /bucket/prefix/a/b/c/file-001​
    ​
通过文件列表删除​
  • 假定配置前提:​
  • vePFS 在客户端节点挂载目录为/mnt/vepfs。​
  • 数据流动路径已按照如下配置:​
  • 文件系统路径配置:/dataset。​
  • 对象存储路径配置:/bucket/prefix。​
  • 待删除文件的文件列表按如下格式填写:​
  • ​
    /dataset/a/b/c/file-001​
    /dataset/a/b/c/file-002​
    /dataset/a/b/c/file-003​
    ​
  • 对应对象存储中待删除文件的文件路径如下:​
  • ​
    /bucket/prefix/a/b/c/file-001​
    /bucket/prefix/a/b/c/file-002​
    /bucket/prefix/a/b/c/file-003​
    ​
​
最近更新时间:2025.09.28 18:30:57
这个页面对您有帮助吗?
有用
有用
无用
无用