Skip to content

Latest commit

 

History

History
20 lines (20 loc) · 7.87 KB

benchmark_read_chunks.md

File metadata and controls

20 lines (20 loc) · 7.87 KB
Image Concurrency Time (s)
zarrs
rust

tensorstore
python

zarr
python

zarrs
python

zarr
dask
python

zarrs
dask
python
Memory (GB)
zarrs
rust

tensorstore
python

zarr
python

zarrs
python

zarr
dask
python

zarrs
dask
python
0 data/benchmark.zarr 1 4.10 5.46 5.00 6.45 5.52 6.74 0.04 0.12 0.12 0.12 0.12 0.13
1 data/benchmark.zarr 2 2.43 3.26 3.25 3.89 3.42 3.76 0.07 0.19 0.18 0.19 0.19 0.19
2 data/benchmark.zarr 4 1.62 2.46 2.71 2.55 2.82 2.71 0.14 0.31 0.31 0.31 0.32 0.30
3 data/benchmark.zarr 8 1.54 2.20 2.68 2.61 3.18 2.63 0.26 0.41 0.57 0.48 0.58 0.41
4 data/benchmark.zarr 16 1.50 2.18 2.85 2.48 3.17 2.65 0.52 0.71 1.06 0.73 1.04 0.67
5 data/benchmark.zarr 32 1.54 2.36 2.92 2.50 3.20 2.68 0.77 1.56 2.06 1.25 1.94 1.20
6 data/benchmark_compress.zarr 1 4.60 6.49 6.06 5.98 6.16 6.33 0.05 0.15 0.13 0.37 0.14 0.35
7 data/benchmark_compress.zarr 2 2.20 3.76 3.65 3.46 3.78 3.57 0.09 0.22 0.21 0.42 0.26 0.41
8 data/benchmark_compress.zarr 4 1.13 2.40 2.56 2.21 2.50 2.27 0.18 0.36 0.46 0.53 0.41 0.51
9 data/benchmark_compress.zarr 8 0.69 1.95 2.22 1.93 2.32 2.09 0.33 0.58 0.74 0.70 0.64 0.62
10 data/benchmark_compress.zarr 16 0.71 1.94 2.22 1.92 2.42 2.06 0.51 0.89 1.18 0.93 1.21 0.88
11 data/benchmark_compress.zarr 32 0.76 1.93 2.42 1.97 2.73 2.23 0.72 1.53 2.17 1.48 2.34 1.35
12 data/benchmark_compress_shard.zarr 1 2.28 2.81 35.19 3.64 26.36 3.59 0.08 0.14 0.34 0.14 0.31 0.14
13 data/benchmark_compress_shard.zarr 2 1.53 2.17 33.19 2.20 24.70 2.39 0.12 0.18 0.44 0.21 0.43 0.19
14 data/benchmark_compress_shard.zarr 4 1.32 1.84 32.03 1.85 27.12 2.05 0.20 0.27 0.59 0.31 0.64 0.31
15 data/benchmark_compress_shard.zarr 8 1.16 1.72 31.47 1.92 29.55 2.01 0.36 0.41 0.83 0.47 0.96 0.43
16 data/benchmark_compress_shard.zarr 16 1.06 1.67 31.72 1.88 33.62 2.05 0.62 0.52 1.37 0.71 1.78 0.67
17 data/benchmark_compress_shard.zarr 32 1.13 1.73 33.18 1.97 36.80 2.21 0.88 0.91 2.45 1.23 3.49 1.23