Airbyte是一个用于构建 ELT 数据管道的开源数据集成平台,今天宣布其云服务全面上市。该公司还详细说明了针对为平台编写和维护数据连接器的开源开发人员的新薪酬计划,并计划在本周晚些时候推出新的命令行界面。
Airbyte 的承诺是,它允许企业通过使用公司预先构建的连接器或构建自己的连接器来轻松创建弹性 ELT(提取、加载和转换)管道。这家快速发展的公司最近筹集了 1.5 亿美元的 B 轮融资,于去年 10 月首次将其云服务发布为有限测试版,此后改进了包括入职流程在内的许多用户体验方面,并花时间了解其云用户的需求与其开源用户的需求有何不同。
“我认为你不能只将开源转换为云。该产品需要进行一些调整,”Airbyte 的联合创始人兼首席执行官 Michel Tricot 解释道。他指出,开源用户往往更具技术性,并且愿意亲自动手以使事情正常进行。毫不奇怪,云用户只想让事情正常进行。
今年早些时候,该公司宣布其部署在 2021 年增长了 6 倍,从第一季度的每月 400 个增加到今年年底的 2,500 个。它现在提供超过 165 个数据连接器,预计到今年年底将增加到 500 个。
补偿开源贡献者现在是一个热点问题。 Airbyte 在这里选择了一个有趣的模型,它选择补偿那些为其平台编写、维护和修复连接器的开发人员。
“我们一直都有贡献——而且每周都有越来越多的贡献者,”Airbyte 联合创始人兼首席运营官 John Lafleur 说。 “确保社区的一部分专注于对用户社区影响最大的一种方法是激励他们。在过去的几周里,我们一直在为此进行 beta 测试,它是关于提供某种赏金、一些奖励,以解决优先事项中的一些问题。这意味着获得从 alpha 到 beta 以及从 beta 到生产的连接器,并解决获得 GA 认证或修复错误所需的内容。”
在实践中,这意味着将 API 流添加到连接器的开发人员可以获得高达 300 美元的收益,例如,更多的增量更新可以获得高达 200 美元的收益。
至于新的命令行访问,特里科特指出,Airbyte 倾向于拥有不同类型的用户。想要以编程方式访问 Airbyte 的技术数据工程师,以及想要基于 UI 的服务的数据分析师。 Airbyte 始终提供编程访问,但 Trico 指出,社区正在寻求一种以编程方式访问服务的方法,该方法结合了所有 GitOps 最佳实践来访问该服务。使用这个新的命令行,用户可以在 Git 上保留他们的配置和连接状态,并将它们合并到他们现有的 CI 管道中。
展望未来,Airbyte 团队指出,它正在努力使其云用户能够同时管理数据和控制平面。 “它永远是我们北极星的一部分,它无处不在且可靠。无处不在意味着我们需要能够在任何地方访问数据,无论是在我们的云上,还是在 AWS、Azure、GCP 或不同的地理区域,”Tricot 说。
他还指出,虽然 Airbyte 目前专注于将数据集中到数据仓库中,但旅程的下一部分将更多地强调将数据转移到 API 中以对其进行操作(基本上,数据管道硬币的另一面) .许多数据团队的第一步是建立基础,这是 Airbyte 现在关注的重点,但接下来自然是为该数据解锁新的用例。
“借助Airbyte Cloud,我们为企业提供了一种简单、经济的方式来根据需要移动数据,从而消除了构建和维护自定义数据基础架构的麻烦,”Tricot 说。 “同样重要的是,我们能够通过为维护人员提供补偿,确保随着Airbyte数据连接器进入普遍可用性,它们满足质量目标,特别是对于否则会成为孤立的长尾数据连接器。考虑到最近 Linux 基金会的调查结果,我们也认为贡献者不仅得到认可,而且得到补偿,这一点很重要。”