Cloudflare Data Platform
8 months ago
- #Data Platform
- #Cloudflare
- #Apache Iceberg
- Cloudflare宣布推出R2数据目录公开测试版，这是在R2对象存储上托管的Apache Iceberg目录服务
- Cloudflare发布了三款新产品：Cloudflare Pipelines、R2数据目录和R2 SQL，共同构成Cloudflare数据平台
- Cloudflare Pipelines通过Workers或HTTP处理事件，使用SQL进行转换，并将数据导入Iceberg或R2存储
- R2数据目录管理Iceberg元数据，现已包含压缩功能以提升查询性能
- R2 SQL是面向R2数据的分布式SQL查询引擎，支持PB级数据查询
- 该平台运行在Cloudflare全球基础设施上，支持开放标准且不收取数据出口费用
- R2数据目录简化了Iceberg的配置和维护流程，通过自动压缩优化性能
- R2 SQL支持无服务器查询R2数据目录表，未来计划扩展更多SQL功能
- 未来更新将包括Logpush集成、用户自定义函数和增强版R2 SQL功能
- 该平台设计注重易用性，采用经济实惠的按使用量计费模式