首页 / GitHub 趋势 / Airbyte:把几百个…
数据与爬虫

Airbyte:把几百个数据源接到一起的开源 ELT

airbytehq/airbyte

GitHub 仓库
airbytehq/airbyte
总 Stars
★ 22,247
主要语言
Python
查看 GitHub 项目

Airbyte(airbytehq/airbyte,2.2 万 star)是开源的数据集成平台:几百个预置连接器,把数据库、API、SaaS 的数据搬进数据仓库。定位是「开源版 Fivetran」,自己部署、数据不过第三方。

能干嘛:数据管道的脏活累活——定时把 MySQL、Postgres、Stripe、Salesforce 等几百个源的数据同步到 BigQuery、Snowflake 或本地 Postgres,增量同步和 schema 变更处理都包了。

适合谁:数据工程师、需要定期同步多源数据的小团队。不想写一堆 cron 脚本维护同步任务的人。

注意点:连接器质量参差,冷门源先在测试环境跑通再上生产。资源占用不小,官方建议的内存配置别打折。

站长点评:数据集成是最容易被低估的脏活——Airbyte 的价值不在「能连」,在「连上之后不用你半夜爬起来修」。小团队用它,等于花一台服务器的钱雇了个数据管道运维。

⬇ 下载区(本站中转)

本站服务器实时中转 GitHub 文件,国内网络也可稳定下载;也可使用右侧官方链接。 本项目遵循 NOASSERTION 许可证。

📦 源码包(默认分支 ZIP)本站下载官方下载

要下载其他 GitHub 项目?试试本站的 GitHub 加速下载工具,粘贴链接即可中转。

数据与爬虫 新星挖掘

相关推荐