使用py在amazons3上打开parquet文件时出错

Question

我有以下代码，它应该从存储在S3上的parquet文件中读取一列数据： fs = s3fs.S3FileSystem() data_set = pq.ParquetDataset(f"s3://{bucket}/{key}", filesystem=fs) column_data = data_set.read(columns=[col_name])

我得到了一个例外： 验证架构 self.schema= 自己的作品[0]。获取\u元数据（打开\u文件）.schema 索引器错误：列表索引超出范围

我升级到pyarrow的最新版本，但它没有帮助