You need to enable JavaScript to run this app.
文档中心
对象存储

对象存储

复制全文
下载 pdf
TOS 加速器(TOS accelerator)
加速器性能测试表现
复制全文
下载 pdf
加速器性能测试表现
本文介绍在特定业务场景中,使用 TOS 普通桶内网域名和 TOS 加速器域名两种情况下所呈现出来的性能差异。​
大批量数据操作场景​
测试方法​
使用 tosutil 工具在 TOS 内网域名以及 TOS 加速器域名两种场景下,对 TOS 数据的读取性能进行测试,测试数据使用 10000 个 100KB 的文件,总量约为 976MB。​
分别针对 TOS 内网域名和 TOS 加速器域名,使用 tosutil cp 命令从 TOS 下载这批 100KB 大小文件到本地,对比两个域名场景下的性能指标。​
  • 参数配置:使用 tosutil 默认参数配置​
  • TOS 内网域名:./tosutil cp tos://accelerator-tos-rd-test-beijing-azd/100k_files ./temp -r​
  • TOS 加速器域名:./tosutil cp tos://accelerator-tos-rd-te-01987847e6127cc48d150322293dafc8-tosalias/100k_files ./temp -r​
测试结果​
​
测试项​
平均时延(ms)​
QPS​
带宽(MB/s)​
TOS 内网域名​
7.53​
372​
36.60​
TOS 加速器域名​
3.17​
856​
85.14​
​
tosutil 在配合 TOS 加速器使用后的性能大约是不开启加速器性能的 2.3 倍,在配合使用 TOS 加速器后,对于大规模数据的批量操作,TOS 加速器能够提升数据传输和访问的速度。​
大数据场景(HNS)​
测试方法​
使用 Hadoop + proton 在 TOS 内网域名和 TOS 加速器域名下,进行大数据的 nnbench 和 dfsio 操作,然后对比,各个读指标之间的差异。​
Nnbench 测试结果​
测试数据使用 100 个 maps,每个 maps 包含 5000 个文件,总数量为 50 万个 1MB 对象。​
​
测试项​
Read 延迟​
QPS​
TOS 内网域名​
65 ms​
1280​
TOS 加速器域名​
10 ms​
4982​
​
说明​
Read 延迟是指 GetObject 的延迟。​
从测试结果来看,QPS 提升了将近 4 倍,Read 延迟降低至 1/6。​
DFSIO 测试结果​
测试数据使用 100 个文件,每个文件 100MB,进行读操作。​
​
测试项​
Throughput​
TOS 内网域名​
99.86 MB/s​
TOS 加速器域名​
252.24 MB/s​
​
机器学习场景​
测试方法​
使用 tos torch connector 在 TOS 内网域名以及 TOS 加速器域名两种方式下,模拟机器学习数据加载场景,对 TOS 数据的读取性能进行对比测试。测试数据使用了2000000 张图片,平均每张 120KB,总量约 228GB。​
以单进程为例,多机多进程性能可线性扩展。​
测试参数:​
  • batch_size:256​
  • num_workers:32​
  • tostorchconnector==1.1.2​
测试结果​
​
测试项​
batch 加载平均时延(ms)​
QPS(img/s)​
带宽(MB/s)​
TOS 内网域名​
160.07​
1600​
192​
TOS 加速器域名​
32.12​
7936​
952​
​
从测试结果数据来看,启用 TOS 加速器之后性能大约是不启用 TOS 加速器的 5 倍左右。此类 AI 场景在配合 TOS 加速器后,能够获得更高的吞吐以及更低的时延。​
下载响应延迟统计​
测试方法​
通过 TOS 内网域名和 TOS 加速器域名下载 10 MB左右的对象进行时延测试,统计其响应延迟分位数。​
测试结果​
​
测试项​
平均时延(ms)​
P50​
P90​
P95​
P99​
TOS 内网域名​
113.555​
102.514​
137.896​
163.218​
251.795​
TOS 加速器域名​
28.309​
30.503​
36.927​
41.692​
61.646​
​
最近更新时间:2026.07.30 15:58:49
这个页面对您有帮助吗?
有用
有用
无用
无用