Pg_parquet v0.4.0: Google Cloud Storage, HTTPS storage, and more
a year ago
- #Data Integration
- #PostgreSQL
- #Parquet
- pg_parquet v0.4.0版本发布，新增支持Google云存储和HTTPS等特性
- 新增功能：支持COPY TO/FROM Google云存储、http(s)存储、以及FORMAT PARQUET的stdin/stdout操作
- 支持Parquet的UUID、JSON和JSONB类型，增强数据处理能力
- pg_parquet简化了在Postgres内导出/导入Parquet文件流程，无需第三方工具
- Parquet是采用列式压缩的开放标准文件格式，适合数据迁移场景
- 推荐使用Apache Iceberg实现完整的云存储数据库元数据层方案
- 文档提供将数据复制到/从Parquet文件及云存储的SQL命令示例
- 0.4版本强化了Postgres与Parquet间的数据流转，适用于分析数仓和数据湖架构
- 轻量级高性能设计，深度集成Postgres原生COPY命令
- 欢迎通过GitHub提交社区贡献和反馈意见