ClickPipes 的 Postgres CDC 连接器现已开启私有预览

今天，我们很高兴宣布 ClickPipes 中 Postgres 变更数据捕获 (CDC) 连接器的私有预览！这使客户只需点击几下即可将其 Postgres 数据库复制到 ClickHouse Cloud，并利用 ClickHouse 进行极速分析。您可以将此连接器用于从 Postgres 进行的持续复制和一次性迁移用例。

该体验原生集成到 ClickHouse Cloud 中，通过 ClickPipes，集成引擎旨在简化海量数据向 ClickHouse 的迁移。 这消除了对外部 ETL 工具的需求，这些工具通常昂贵、缓慢且无法为 Postgres 扩展。

您可以通过点击此链接注册私有预览.

温馨提示，ClickHouse 在几个月前与 PeerDB 强强联合，PeerDB 是领先的 Postgres 变更数据捕获 (CDC) 提供商。PeerDB 已经支持多种企业级工作负载，并已帮助将 PB 级数据从 Postgres 复制到 ClickHouse。在过去的几个月中，该团队一直努力将 PeerDB 原生集成到 ClickHouse Cloud 中。 此公告标志着此集成的首次发布，使用户能够无缝地将数据从 Postgres 迁移到 ClickHouse。

Postgres CDC 连接器是在与几家客户和设计伙伴紧密合作下构建的，他们已经在运行生产级工作负载。以下是一些客户评价

“PeerDB 对我们来说是一个颠覆者，它可以轻松地将 TB 级数据从我们的 Postgres 数据仓库迁移到 ClickHouse，并保持每天数百万个订单同步，延迟仅为几秒钟。我们对 PeerDB 通过 ClickPipes 原生集成到 ClickHouse Cloud 以及它为我们带来的所有机遇感到非常兴奋。” - SpotOn

“借助 PeerDB，我们已经将 Postgres 到 ClickHouse 的快照时间从 10 多个小时缩短到 15 分钟。将 ClickHouse 强大的分析能力与 PeerDB 的实时数据捕获能力原生结合，将大大简化我们的数据处理工作流程。这种集成将使我们能够更快地构建分析应用程序，从而在市场上获得竞争优势。” - Vueling

无需赘言，以下是 ClickPipes 中 Postgres CDC 连接器的演示

通过无缝 CDC 集成使用 ClickHouse 和 PostgreSQL 创建了一个强大的数据栈，它结合了 PostgreSQL 强大的事务处理能力和 ClickHouse 的高性能分析能力。 CDC 确保实时同步，使 ClickHouse 能够处理海量数据集上的快速查询，而不会给 PostgreSQL 带来负担。 这种集成提供了实时洞察和可扩展的分析，使其成为现代数据驱动工作流程的理想解决方案。以下是这种架构的一些主要优势

1. 完全工作负载隔离： 您可以继续在 Postgres 上构建 OLTP 应用程序，在 ClickHouse 上构建 OLAP 应用程序，并实现完全工作负载隔离——分析不会影响您的事务性工作负载。

2. 功能上不妥协： 它还允许您使用 Postgres 和 ClickHouse 的全部功能和特性（例如，SQL 覆盖率、性能等）构建应用程序，每个都针对特定工作负载进行了优化。

我们认为，客户通过利用像 Postgres 和 ClickHouse 这样的专用数据库（按照它们的设计目的，具有完全的灵活性）来解决真实世界的数据问题，可以获得最大的价值，而不是依赖于将一个数据库引擎改造为另一个数据库引擎的替代方案，从而牺牲每个数据库的完整功能集。我们观察到，在真实世界的客户中，Postgres + ClickHouse 架构正呈现明显的 趋势。

ClickPipes 中的 Postgres CDC 连接器专为 Postgres 和 ClickHouse 构建，确保快速、简单且经济高效的复制体验。以下是客户的一些主要优势

借助并行快照等功能，您可以实现快 10 倍的初始加载速度，在数小时而不是数天内传输 TB 级数据，并体验低至几秒钟的持续复制（CDC）延迟。

您只需点击几下并在几分钟内即可开始将 Postgres 数据库复制到 ClickHouse。只需将您的 Postgres 数据库添加为源，选择您要复制的特定表/列，即可开始使用。

此连接器支持原生 Postgres 功能，例如模式更改复制、分区表、内置复制槽大小监控和警报，以及对复杂数据类型（如 JSONB 和 ARRAY）等的支持。

在 ClickHouse 端，它支持在复制过程中选择专用表引擎、配置自定义排序键、选择可为空列等功能。

在 ClickHouse，安全是首要任务，甚至优先于性能和功能。我们将相同的安全级别扩展到 ClickPipes 中的 Postgres CDC 连接器。它包括 SSH 隧道和私有链接等功能，可安全连接到您的 Postgres 数据库。传输中的数据使用 SSL 完全加密。

Postgres CDC 连接器由 PeerDB 驱动，PeerDB 是完全开源的 https://github.com/PeerDB-io/peerdb/。除了 UI 之外，我们已确保所有组件都直接从 PeerDB 开源项目扩展而来。这强调了我们对开源的承诺，并确保我们的客户不会受到厂商锁定。

您可以通过填写此页面上的表格来注册私有预览。我们的团队将在一天之内与您联系，并与您紧密合作以提供提前访问权限。私有预览完全免费，不产生任何费用。这是一个绝佳的机会，让您获得 ClickHouse Cloud 中原生 Postgres 集成的第一手经验，并直接影响路线图。期待您的加入！