> ## Documentation Index
> Fetch the complete documentation index at: https://private-7c7dfe99-fix-nav-issues.mintlify.site/llms.txt
> Use this file to discover all available pages before exploring further.

> 您可以使用 Google Dataflow 将数据摄取到 ClickHouse

# 集成 Google Dataflow 与 ClickHouse

export const ClickHouseSupportedBadge = () => {
  return <div className="ClickHouseSupportedBadge">
            <div className="ClickHouseSupportedIcon">
                <svg width="16" height="16" viewBox="0 0 16 16" fill="none" xmlns="http://www.w3.org/2000/svg">
                    <path d="M1.30762 1.39073C1.30762 1.3103 1.37465 1.22986 1.46849 1.22986H2.64824C2.72868 1.22986 2.80912 1.29689 2.80912 1.39073V14.4886C2.80912 14.5691 2.74209 14.6495 2.64824 14.6495H1.46849C1.38805 14.6495 1.30762 14.5825 1.30762 14.4886V1.39073Z" fill="currentColor" />
                    <path d="M4.2832 1.39073C4.2832 1.3103 4.35023 1.22986 4.44408 1.22986H5.62383C5.70427 1.22986 5.7847 1.29689 5.7847 1.39073V14.4886C5.7847 14.5691 5.71767 14.6495 5.62383 14.6495H4.44408C4.36364 14.6495 4.2832 14.5825 4.2832 14.4886V1.39073Z" fill="currentColor" />
                    <path d="M7.25977 1.39073C7.25977 1.3103 7.3268 1.22986 7.42064 1.22986H8.60039C8.68083 1.22986 8.76127 1.29689 8.76127 1.39073V14.4886C8.76127 14.5691 8.69423 14.6495 8.60039 14.6495H7.42064C7.3402 14.6495 7.25977 14.5825 7.25977 14.4886V1.39073Z" fill="currentColor" />
                    <path d="M10.2354 1.39073C10.2354 1.3103 10.3024 1.22986 10.3962 1.22986H11.576C11.6564 1.22986 11.7369 1.29689 11.7369 1.39073V14.4886C11.7369 14.5691 11.6698 14.6495 11.576 14.6495H10.3962C10.3158 14.6495 10.2354 14.5825 10.2354 14.4886V1.39073Z" fill="currentColor" />
                    <path d="M13.2256 6.6057C13.2256 6.52526 13.2926 6.44482 13.3865 6.44482H14.5662C14.6466 6.44482 14.7271 6.51186 14.7271 6.6057V9.27354C14.7271 9.35398 14.6601 9.43442 14.5662 9.43442H13.3865C13.306 9.43442 13.2256 9.36739 13.2256 9.27354V6.6057Z" fill="currentColor" />
                </svg>
            </div>
            ClickHouse Supported
        </div>;
};

[Google Dataflow](https://cloud.google.com/dataflow) 是一项全托管的流处理和批处理数据处理服务。它支持使用 Java 或 Python 编写的管道，并且基于 Apache Beam SDK 构建。

将 Google Dataflow 与 ClickHouse 结合使用主要有两种方式，这两种方式都借助了 [`ClickHouseIO Apache Beam connector`](/zh/integrations/connectors/data-ingestion/etl-tools/apache-beam)。
具体如下：

* [Java 运行器](#1-java-runner)
* [预定义模板](#2-predefined-templates)

<div id="1-java-runner">
  ## Java 运行器
</div>

[Java 运行器](/zh/integrations/connectors/data-ingestion/GCP/google-dataflow/java-runner) 允许你使用 Apache Beam SDK 的 `ClickHouseIO` 集成实现自定义 Dataflow 管道。该方式可为管道逻辑提供完全的灵活性和控制力，使你能够根据具体需求定制 ETL 流程。
不过，此选项要求具备 Java 编程知识，并熟悉 Apache Beam 框架。

<div id="key-features">
  ### 主要特性
</div>

* 可高度定制。
* 非常适合复杂或高级使用场景。
* 需要编写代码并理解 Beam API。

<div id="2-predefined-templates">
  ## 预定义模板
</div>

ClickHouse 提供专为特定用例设计的[预定义模板](/zh/integrations/connectors/data-ingestion/GCP/google-dataflow/templates)，例如从 BigQuery 批量导入数据，或将 Pub/Sub 中的数据流式摄取到 ClickHouse。这些模板开箱即用，能够简化集成流程；如果你更倾向于无代码方案，它们是非常合适的选择。

<div id="key-features">
  ### 主要特性
</div>

* 无需编写 Beam 代码。
* 对于简单用例，可快速轻松完成设置。
* 即使编程经验有限，也同样适用。

这两种方法都与 Google Cloud 和 ClickHouse 生态系统完全兼容，可根据你的技术水平和项目需求灵活选择。