Parquet S3 FDW 1.1.0 发布
发布于 2023-12-26,作者:东芝
相关开源项目
我们刚刚发布了用于 Amazon S3 上 Parquet 文件的外部数据包装器 1.1.0 版本。
此版本可与 PostgreSQL 13、14、15 和 16 一起使用。
此版本改进了以下项目(从 1.0.0 版本开始):
- 支持 PosgreSQL 16.0
- 支持 PGSpider 的 DDL 功能
- 应用 Parquet FDW 更新
该 FDW 支持以下功能:
- 支持选择本地文件系统或 Amazon S3 上的 parquet 文件
- 支持 INSERT、DELETE、UPDATE(外部修改)。
- 支持使用 MinIO 而不是 Amazon S3 进行访问。
- 允许控制事务完成后外部服务器是否保持连接打开。这由 keep_connections 控制,默认为 on。
- 支持 parquet_s3_fdw 函数 parquet_s3_fdw_get_connections() 来报告打开的外部服务器连接。
- 支持通过指定目录路径为目录中的多个文件创建外部表。
- 支持无模式模式,允许访问数据文件中的元素,而无需使用 jsonb 类型列更改表定义。
这是由东芝数字创新技术中心开发的。请查看存储库了解详情。
源代码仓库:https://github.com/pgspider/parquet_s3_fdw