zarr-python

Zarr は Zarr ストレージ形式の Python 実装であり、並列計算やオブジェクトストレージに適した、圧縮およびチャンク分割された N 次元配列を提供します。NumPy 互換の dtype による配列の作成、任意の次元に沿ったチャンク分割、各種コンプレッサーによるチャンクのエンコードをサポートします。配列はメモリ、ディスク、zip ファイル内、または S3 などのオブジェクトストレージに保存できます。このライブラリは複数のスレッドまたはプロセスからの並行読み取りと書き込みをサポートし、配列を階層的なグループに編成できます。インストールは pip または conda で可能です。リポジトリには、メタデータツール、チャンク分割された配列の遅延インデックス作成、Zarr データを対象とする HTTP サーバーのサブパッケージも含まれています。