如何使用blosc压缩的numpy数组存储元数据我目前正在使用blosc压缩numpy阵列,并具有以下功能: view = memoryview(large_np_arr) compressed = blosc.compress(view, typ ...2024-05-15 已阅读: n次
Pandas在大环境下阅读我试图用pandas库读取一个64gb的HDF文件(用blosc压缩)。数据帧包含3列和11410996915行。我试图用这个方法按索引选择具体的行熊猫。阅读争论在哪里。问题是,有时我需要获取数千行, ...2024-05-15 已阅读: n次
PyTables中的快速列切片我在PyTables中有大量整数(100万行,50000列): In [22]: fmat Out[22]: /fmat (CArray(1025461, 54123), shuffle, blos ...2024-05-15 已阅读: n次
安装Python Blos时出现链接错误我安装了C-Blosc库没有问题,但是当我尝试安装python Blosc并转到python setup.py build_ext --inplace --blosc="C:\\Program Fil ...2024-05-15 已阅读: n次
带着大Pandas飞过地球这里是Python新手。在 我试图用lz4压缩将一个大数据帧保存到HDF文件中。在 我用的是windows10,python3,Pandas 20.2 我得到错误“overflowerr:Python ...2024-05-15 已阅读: n次
安装明显成功后,在conda环境中加载表时遇到问题我在conda部分下面的tutorial之后在conda环境中安装了pytables。基本上我做了以下步骤: conda config --add channels conda-forge conda ...2024-05-15 已阅读: n次
通过h5py在hdf5中进行blosc压缩我使用h5py在python中创建hdf5文件,我希望使用blosc作为压缩过滤器。我首先通过以下方式从源安装了c-blosc: wget https://github.com/Blosc/c-blo ...2024-05-15 已阅读: n次
如何降低HDFStore的大小开销?我正在试验不同的适合熊猫的蜱虫数据存储方案。到目前为止,最快的(在读写方面)是使用带有blosc压缩和“固定”格式的HDFStore。在 store = pd.HDFStore(path, compl ...2024-05-15 已阅读: n次
Python模块表编译失败我正在尝试在Mingw32中为python 2.7安装tables: $ pip install tables 编译期间安装失败: Running setup.py install for tabl ...2024-05-15 已阅读: n次
安装python的包表时出错当我尝试为python构建包tables-3.1.1时,这就是问题所在: sudo python setup.py build_ext --inplace dyld: DYLD_ environmen ...2024-05-15 已阅读: n次
osx中的pytables安装错误我的Xcode版本是5.1,所以我试着用这个安装pytables。你知道吗 ARCHFLAGS=-Wno-error=unused-command-line-argument-hard-error-i ...2024-05-15 已阅读: n次
将压缩后的数组完全从磁盘加载到内存(同样)压缩的智能方法是什么?我正在试验存储在磁盘上的三维zarr阵列: Name: /data Type: zarr.core.Array Data type: int16 Shape: (102174, 1100, 900) ...2024-05-15 已阅读: n次
blosc python blosc:用于极快速blosc压缩库的python包装器 Author:Francesc Alted Author:Valentin Haenel Contact:fal ...2024-05-15 已阅读: n次
imagecodecs 要求 此版本已使用以下要求和依赖项进行了测试 (其他版本可能有效): cpython 2.7.15、3.5.4、3.6.8、3.7.3、64位 ...2024-05-15 已阅读: n次
mrczmrcz是流行的电子显微镜的一个高度优化的压缩版本。 MRC图像格式。它使用blosc元压缩程序库作为后端。它 可以使用许多高性能的无损耗压缩编解码器,如“lz4” 和“zstd”,它可以应用位洗牌过 ...2024-05-15 已阅读: n次
carracarray是一个数字数据的分块容器。分块允许 数据容器的有效放大/缩小。另外,它可以 也可以压缩以减少内存需求。压缩过程 由blosc内部执行,blosc是一种高性能压缩机 为二进制数据优化。 ...2024-05-15 已阅读: n次
blzblz是数值数据的分块容器。分块允许 数据容器的有效放大/缩小。另外,它可以 也可以压缩以减少内存/磁盘需求。压缩 过程由blosc内部执行,blosc是一个高性能的 为二进制数据优化的压缩器。 ...2024-05-15 已阅读: n次
pickle-bloscpickle blosc 使用blosc压缩读写pickle文件。 安装 从终端输入 pip install pickle-blosc 用法 >>> from pickle_bl ...2024-05-15 已阅读: n次