Migrating 6.5B Rows from MongoDB
2 days ago
- 收购了 Gauges 分析平台，并承诺迁移历史数据，无需客户更改跟踪代码或 API 集成。
- 用基于 Laravel 的系统替换了 Ruby on Rails 应用程序，以处理数据摄取和 API 兼容性，避免长期依赖不熟悉的语言。
- 构建了一个安全的只读迁移 API 服务器，与旧版 MongoDB 数据库交互，使主要的 Fathom 应用程序与 MongoDB 隔离。
- 将 Gauges 站点映射到 Fathom 帐户，处理新客户和现有客户，并将历史细分数据作为月度汇总迁移，以减少请求量。
- 通过迁移到生产环境并简化迁移界面，克服了包括性能不足的迁移服务器、本地 ClickHouse 内存限制和 AWS Lambda 超时等瓶颈。
- 成功切换跟踪端点和 API，导入了 65 亿行数据，并淘汰了旧基础设施，从而大幅节约成本。