- 文档首页
对象存储
工具指南
tosfsspec
tosfsspec 性能表现
tosfsspec 性能表现
本文主要介绍 tosfsspec 在不同场景下的性能表现。
- 写场景:使用 open(..., 'wb') 获取可写文件句柄,持续写入多个 GB 级对象,对端到端的写入带宽进行对比。
- 读场景:使用 open(..., 'rb') 获取可读文件句柄,持续读取多个 GB 级对象,对端到端的读取带宽进行对比。
- 1 并发:写入/读取总共 N 条,总量约 10GB 的对象。
- 32 并发:写入/读取总共 N 条,总量约 10GB 的对象。
- 火山引擎实例规格 ecs.g3ine.24xlarge,96 vCPU / 384GiB 内存,144 Gbps 内网带宽。
下表给出了在不同工具和并发数下,写入大文件的端到端带宽表现(单位:MB/s)。
下表给出了在相同环境下,读取大文件的端到端带宽表现(单位:MB/s)。
tosfsspec 具备更高的端到端读写带宽,整体性能优于同类 fsspec 实现,适用于数据仓库导入导出、大规模日志归档、机器学习训练数据准备等需要高带宽访问 TOS 的场景。
最近更新时间:2026.03.20 11:52:56