Tag: DataX
All the articles with the tag "DataX".
-
【归档文章】DataX 实践（三）从 PostgreSQL 读数据库增量同步表到 MongoDB 写数据库
本文分享 DataX 工具从 PostgreSQL 数据库增量同步数据到 MongoDB 的实践方法, 侧重配置文件编写和处理价格字段与更新时间字段的同步, 以时间戳作为主键保存。初衷是提供一个参考示例, 但文章属归档内容, 可能已非最佳实践, 建议谨慎参考。
-
【归档文章】DataX 实践（二）从 PostgreSQL 读数据库全量同步表到 PostgreSQL 写数据库
本文通过实践 DataX 工具，探索 PostgreSQL 数据库之间的全量数据同步方法。分享了配置文件的示例代码，并讨论了在同步过程中遇到 JSONB 字段类型不支持时的挑战。采用临时列存储转换数据，再通过 SQL 更新回原列的方式解决，旨在为读者提供一些参考经验。
-
【归档文章】DataX 实践（一）构建 DataX 的 Docker 容器镜像并测试运行
分享为 DataX 工具构建 Docker 容器镜像的过程，包括在 CentOS 7 中配置 JDK 1.8 和 Maven 环境，编译 DataX 源码时处理依赖问题，并编写 Dockerfile 完成镜像构建。通过测试配置文件验证运行，旨在解决从 PostgreSQL 同步数据到 MongoDB 的需求。文章为归档内容，仅供参考。