搜索你想找的开源项目

输入名称、用途或关键词,也可粘贴 GitHub 仓库链接

分享到微信

当前解读页的微信分享二维码

用微信扫一扫打开,点击右上角「···」分享给朋友或朋友圈。

手机上可截屏后,在微信扫一扫中从相册识别二维码。

airbytehq/airbyte

数据

开源 ELT 数据集成平台,把 API、数据库和文件的数据同步到数仓、数据湖或 AI 应用。

22,329
5,441
Python
NOASSERTION
创建于 6 年前

项目介绍

Airbyte 是一个开源的数据移动平台,用于构建 ELT 管道:把 API、数据库、文件等来源的数据同步到数据仓库、数据湖和 AI 应用,并提供 700+ 连接器的目录。它既可以自托管为 Airbyte Core,也可以使用托管版 Airbyte Cloud。项目还提供 MCP 服务,让 Claude、ChatGPT、Cursor、VS Code Copilot 等 AI 代理创建和排查同步任务、读取日志。

它面向需要大量长尾集成、又希望自行定制连接器的数据工程师和平台团队。连接器可以通过无代码 Connector Builder 或低代码 CDK 开发,同步任务可以用 Airflow、Dagster、Kestra 或 Airbyte API 编排。

快速使用

  1. 选择部署方式:自托管部署 Airbyte Core,或注册 Airbyte Cloud 并按 Cloud 入门指南操作。
  2. 从连接器目录中选择来源和目标,例如以数据库为来源、以数仓为目标。
  3. 在 Airbyte 界面中配置连接,选择要同步的流并设置调度,运行首次同步后检查日志。

如果要从 AI 代理操作 Airbyte,先阅读 Airbyte MCP 概览。Airbyte Cloud 用户连接托管服务器 https://mcp.airbyte.com/mcp,按 Cloud 配置指南通过 OAuth 登录;自托管部署则按自托管配置连接本地 API。

部署前可以先通过演示应用了解界面。

使用约束

Airbyte Cloud 提供自托管版没有的功能,例如 context layer 允许 AI 代理直接读取受支持来源的实时数据、查询 BigQuery 和 Snowflake 等目标,无需等待同步完成;直接读取是只读的,且仅在 Cloud 中可用(context layer)。

仓库并非单一许可证:徽章同时显示 MIT 和 ELv2,具体条款见许可证文件和许可证 FAQ。2025 年有一个题为“Migrate connectors from MIT to ELv2”的 PR 被发布到 Hacker News,因此团队在再分发或商业使用前应核实连接器的许可。Airbyte Enterprise 在开源版之上提供安全等额外功能(Airbyte Enterprise)。安全漏洞应通过漏洞披露政策报告,而不是提交 GitHub issue。

HotRepo 点评

Airbyte 自 2021 年起出现在 Hacker News 讨论中:当年的发布帖获得 68 分和 24 条评论,2022 年的 Show HN 强调了 300+ 连接器,2024 年 1.0 发布也有记录。这些讨论也反映出持续存在的争议:一位早期评论者认为该项目“不是完全开源”,因为部分功能需要付费(讨论),而 Airbyte 工程师回复称连接器和核心 ELT 功能将始终免费且开源。后来关于连接器从 MIT 迁移到 ELv2 的讨论说明,许可证是需要核查而非默认的前提。

在 HotRepo 上,截至 2026-11-06 的 Python 日榜快照,该仓库有 22,325 Star 和 5,442 Fork,当日新增 9 Star,在该日 Python 榜上最高排第 7。单次快照只能说明当天情况,不能据此判断趋势。

本文由 AI 根据项目 README 生成,更新于 ,以项目官方文档为准。

Hacker News 讨论

Airbyte: Simple and extensible open-source EL(T)
▲ 68 · 24 条评论 · 2021年1月16日
Show HN: Airbyte, data integration platform with 300+ open-source connectors
▲ 29 · 13 条评论 · 2022年12月16日
Airbyte 1.0 Released
▲ 4 · 1 条评论 · 2024年9月25日