GitOps：一款基于Kubernetes的高速CI/CD框架

以你之姓@ 2022-03-22 04:56 165阅读 0赞

【编者的话】Alexis是Weaveworks的联合创始人兼CEO，同时也出任CNCF与TOC主席兼Code峰会的联合创始人、RabbitMQ的共同创始人，并曾担任2010年被VMware收购的Rabbit公司的首席执行官。在这篇文章中他详细介绍了GitOps——一款基于Kubernests的高速CI/CD框架。  
  
“把世界设想成一套代码库，而非Kubernetes环境。”——Kelsey Hightower  
  
这篇文章主要面向希望使用Kubernetes和Docker进行高速持续交付的用户而言。 当我们提到“高速”时，我们的意思是每个产品团队可以安全地每天多次交付更新 ——包括即时部署，实时观察结果，并通过反馈进行推进或者回滚。其目标，是让产品团队尽可能快地通过[持续实验][Link 1]来改善客户体验。  
  
如果您还不熟悉GitOps，这是一套可以对现代应用程序进行敏捷化软件生命周期管理的框架。 感兴趣的朋友可以通过阅读我们的系列博文了解更多，今天让我们从《[Gitops——Pull Request的操作][Gitops_Pull Request]》开始。

### 用户案例：高速CI/CD改变游戏规则 ###

一个团队如何从每周一次手动部署提升到每天超过三十次的无需额外工作的部署？  
  
[Qordoba][]是一支来自旧金山的团队，他们利用机器学习技术为各大国际品牌交付经过优化的本地服务。 他们的一个团队正在使用基于Kubernetes的微服务作为Qordoba后端的一部分。 通过采用我们推荐的GitOps实践与工具，他们从根本上提高了自身塑造用户体验的能力：

1.  修复生产环境软件错误所需的预计时间：使用Weave Cloud后，所需时间缩短60％
2.  响应客户请求的预计时间：使用Weave Cloud后，时间缩短约43％
3.  正常运行时间从99％提升到100％（到目前为止……）

Qordoba从每周部署1或2次提升到了每天部署超过30次。更重要的是，每一项部署实质上都是“零成本”的。 这意味着：其需要的时间很短，不致中途中断并导致团队无法将系统恢复至良好状态，且所有变更皆可实现回滚。 零成本部署解放了开发团队，让他们专注于用户体验和业务逻辑——即真正能够创造价值的工作，并按照自己适应的速度进行迭代，且无需担心失败成本。

### 了解更多：GitOps介绍资料 ###

我在[KubeCon 2017][]上和Google的项目经理William Denniss共同演示了这个用例。  
  
一些背景：Weaveworks已经在AWS上拥有长达两年的[生产环境的Kubernetes云服务][Kubernetes]运行周期。最近我们总结了一些最佳实践，[我们称之为“GitOps”][Gitops_Pull Request]。 GitOps基于经过验证的DevOps技术——大体类似于[CI/CD][CI_CD]和[声明式][Link 2][基础设施即代码][Link 3]——而构建，为Kubernetes应用程序提供了一套联合的、可自动生成的生命周期框架。 [我们在KubeCon上和Google Cloud Platform一起推出了“免费”的GitOps功能][KubeCon_Google Cloud Platform_GitOps]。  
  
如果您有兴趣了解我们是如何做到这一点的，例如创建一条高速CI/CD流水线，那么我建议您查看这个演示文稿（[视频][Link 4]和[幻灯片][Link 5]）。

[![Screen\_Shot\_2018-01-17\_at\_09.39\_.03\_.png][Screen_Shot_2018-01-17_at_09.39_.03_.png]][Screen_Shot_2018-01-17_at_09.39_.03_.png]

KubeCon是一项社区活动，所以在本演讲中，William和我谈论了解决方案的模式、Kubernetes部署运维工程师的技术角色以及其它与之配合的开源项目。

### 即时Kubernetes CI/CD与Weave Cloud ###

如果你喜欢这个演示文稿以及GitOps的创意，那么你可能会打算新手上手一试。 最便捷的方式当然是[通过由Google上提供的Weave Cloud设置][Google_Weave Cloud]。  
  
这些会让你获得：

1.  一条可以在几分钟内搭建的Kubernetes流水线
2.  一键部署的应用（当然，如果有必要仍然需要手动分段）
3.  全面的可观察性、仪表板与警报

[Weave Cloud][]可以轻松将您的Git存储库接入至任何CI。 其为CI/CD建立一套Kubernetes集群，以便您可以从之前提到的Qordoba持续与高速交付中受益。 在Google云上，您的GKE群集可以轻松连接到Google的容器构建器和存储库。 但我们希望再次强调：Weave Cloud可以与任何集群、任何网络、任何CI以及任何Git库协同工作——我们不会强迫你选择自己不喜欢的道路。  
  
有鉴于此，您可以通过Git PR、CLI或GUI对应用程序进行更新和回滚。 最后，我们提供集成化“全栈式”监控和管理，以完成运整个操作循环。 Weave提供的集成方案意味着开发人员可以观察部署情况，从而衡量并应对各类变化及其产生的影响。 下图所示为一套示例UI。

[![weave\_deploy.png][weave_deploy.png]][weave_deploy.png]

### 开源GitOps ###

我们的云服务为利用Kubernetes实现GitOps提供了一种方便且令人满意的方式。 但是如果你是一位希望建立并了解自己开源流水线的开发者呢？ 请阅读下面的内容来了解可供选择的一些GitOps方法。

方法1——使用Weave Flux部署Operator

我们建议您使用Operator模式来监听和编排部署到您Kubernetes集群中的服务。William Denniss在我们KubeCon演示（[视频][Link 4]、[幻灯片][Link 5]）资料的第15-21页中描述了这种方法。使用Operator，代理可以代表集群来监听与自定义资源变更相关的事件，并通过一致性方式加以应用。换句话说，Operator负责执行Git和集群之间的协调工作。  
  
Operator是由[Weave Flux这个开源项目实现的][Weave Flux]。这个项目的诞生，源自我们为了简化Weave Cloud将微服务部署到Kubernetes而作出的大量痛苦尝试。请参阅这篇[博客文章《GitOps管道》][GitOps]，文中阐述了编排部署相较于通过CI+脚本（“CI操作”）手工编写代码的种种优势。  
  
Flux被应用于我们的[Weave Cloud][Weave Cloud 1]服务。我们建议你在云端加以尝试或自行探索设置方法。我们同样欢迎外部的开源代码贡献者和对Flux感兴趣的公司参与项目当中。多种CI和部署工具都能够通过部署Operator受益——请与我们[联系][Link 6]。

方法2——GitOps，Kelsey方法的实现基础

Kelsey Hightower有一个非常好的习惯，即提供简单但始终以开发人员为关注重点的精彩演示。他在KubeCon的主题演讲自然也不例外（[视频][Link 7]）。  
  
Kelsey的演讲主要探讨如何使用Github和Google Cloud进行持续交付，而其出发点为“kubectl就是新的SSH……如果您正在使用kubectl从笔记本电脑部署软件到生产环境，那么您已经错失了几项重要步骤……”。接下来他提供了一个demo，展示了如何通过CI与分段实现从Git到生产环境的直观仪表板实现步骤。这些步骤简洁直观且干货满满，我建议观看他[演讲的视频][Link 8]。  
  
Kelsey的分析建立在两个前提上：

1.  Kubernetes的部署未能完全解决问题。他说：“有多少人拥有端到端的连续交付流水线？”一旦决定使用kubernetes，这将成为一个可望而不可及的目标……并导致你投入大量时间。”
2.  开发人员希望通过Git来驱动变更，并观察结果。他说：“在理想情况下，如果我变更了代码，肯定希望单纯通过一条URL来告诉我它在哪里运行......如果你能给我度量指标，告诉我它运行得如何，那肯定更好。最好的结果是，你能够给予可见性，用户就不会再怀疑像kubectl这样的工具是否真像你宣传的那么好——因为现在他们已经能够实际观察到集群中发生了什么。”

这与我们在GitOps上希望达到的目标大致相同。其中的关键在于，将Git视为您技术堆栈中所有状态的理想来源——包括集群、配置，应用程序和工具——并配合使用声明式基础设施即代码。请阅读我们的第一篇博客文章《[Pull Request的操作][Gitops_Pull Request]》了解更多详情。

### 选择你的GitOps探索之旅 ###

在这篇文章中，我们提供了三种尝试高速CI/CD的方法。

1.  一项开箱即用的服务，使用Weave Cloud提供的从Git到GKE集群的默认CI/CD流水线，包括监控、可观察性、审计和功能，且支持弹性伸缩。这项服务也适用于其他Kubernetes供应方案及您自己的CI。
2.  引入Weave Flux，我们在第1条中也需要使用到这款独立且开源的部署执行程序。其能够运行您所使用的任何Kubernetes集群。
3.  Kelsey演示了如何设置自己的简单GitHub-to-Google流水线。

这三种方法在实际效果上完全一致。下面我们来具体作出比较。  
  
Weave Cloud服务最易于上手，因为它为您设置了GitOps流水线，并且[包含对GitOps可观察性的大量支持][GitOps 1]，这本身就是一个重要的问题。借用Kelsey的原话——我们希望“让人们看到……实现目标的最好办法就是为人们提供一套仪表板，借此展示实际发生的状况”。  
  
Weave Flux开源Operator只聚焦于CI/CD中的“CD”部分。通过使用Flux，用户将可以对发布工作流程进行大规模重复与管理——且实现难度要比使用“kubectl”或将脚本捆绑到CI工具上容易得多。 Flux是一种协调与通知代理，能够“与本地Kubernetes交互”，以便对任何Kubernetes对象进行集群变更，包括实现对同步代码、配置文件、容器、标签等的更改。您还可以获得诸如“回滚”，“自动”，“手动”部署等策略（还有更多，例如蓝/绿和金丝雀部署等）。  
  
Kelsey的方法当然也可以进一步分解成更小的部分。他提供了从Git到CI到GKE的集成示例，但并没有提到像Flux Operator这样的程序化代理。将Kelsey的方法与Flux结合起来显然是种合乎逻辑的作法。事实上，[我们的KubeCon演示文稿][Link 5]在第21页就展示了这种集成方法：

[![gitops\_cd\_pipeline.png][gitops_cd_pipeline.png]][gitops_cd_pipeline.png]

还要注意的是，Kelsey建议在他的演示中使用一套精心设计的仪表板——Grafana。 我们对此深表赞同，并在我们的云服务中也提供这样的工具——同时还集成有Slack。

### 隐私问题如何解决？ ###

这是迄今为止关于GitOps最常问到的问题。  
  
好消息是，我们在Bitnami的朋友创建了一个专门用于GitOps工作流程的[Sealed Secrets开源项目][Sealed Secrets]。 Sealed Secrets是一款定制化Kubernetes资源定义控制器，它甚至允许您在Git中存储敏感信息（即secrets）——这在以前是完全无法想象的。 另请参阅《[构建Serverless应用程序流水线][Serverless]》，由同样参加了KubeCon大会、来自Bitnami公司的Sebastien Goasguen提供。  
  
另外，您可以[将Weave Cloud的部署功能与Sealed Secrets结合使用][Weave Cloud_Sealed Secrets]，从而创建一套连续的部署流水线——其中所有操作皆基于Git实现，且您应用程序的全部所需状态都会在Git仓库中声明，包括您的隐私。

### Helm效果如何？ ###

[Helm charts][]是一种将复杂Kubernetes应用程序打包并进行原子部署的好方法。 要了解更多关于Helm的信息，我推荐Vic Iglesias带来的这段[很酷的KubeCon谈话][KubeCon]。  
  
我们正在努力将Helm charts作为GitOps工作流程中的首要对象。这是一个非常令人兴奋的想法：它结合了Helm的好处，即“chart”封装与模板；外加GitOps本身的好处，其中包括：各版本部署历史记录，用于帮助重新创建集群; 实现集群状态更新自动化以反映charts及其自定义更新；以及通过集群状态更新自动化以反映容器镜像的开启等等：）

### 我该如何参与？ ###

如果您对以上议题抱有兴趣，请[联系我们][Link 6]——您将迎接多种多样的贡献方式。 其它工作方向包括蓝/绿与金丝雀等高级部署测试策略。 Istio等工具可用于在运行时内控制路由配置，例如更新流量的权重百分比。 GitOps是如何做到这一点的？ 传统的基础设施即代码将部署组件视为不可变元素，但金丝雀部署却强调可变配置。 同样的道理，我们希望未来能够出现更多工具包，从而为Kubernetes提供更为丰富的插件选项——例如[Istio][]、[OpenFaaS][]和[Kubeflow][]。 我们该如何让这些GitOps理念真正转化为现实？

### 在Monkigras与我们见面 ###

如果您2月1日和2日身在伦敦，请到[Monkigras][]与我们见面。 这是一场关注技术、工艺与啤酒的年度最佳会议——而且最重要的是与会人群。 这次的主题是“连续的艺术”，也就是构建永恒。 今年的[演讲阵容][Link 9]非常棒，您在这里能够见到许多值得结交的新朋友。 在这里，您将遇见来自Pivotal、CNCF、Aqua、Weaveworks、Honeycomb、Docker和Sysdig社区的技术精英——当然，这还只是与会者翘楚中的一小部分。

[![monkigras7.png][]][monkigras7.png]

今年我们会免费提供咖啡，并期待着与您会面。最重要的是，我们需要您的帮助——即共同探索快速交付软件的最佳途径。  
  
我们与Monkigras合作，为您提供20％的独家票价折扣。 数量有限，先到先得！ 使用优惠码“weaveworks”，即可在他们的eventbrite注册页面上获得20％的折扣。

[Link 1]: https://blog.acolyer.org/2017/09/29/the-evolution-of-continuous-experimentation-in-software-product-development/
[Gitops_Pull Request]: https://www.weave.works/blog/gitops-operations-by-pull-request
[Qordoba]: https://qordoba.com/
[KubeCon 2017]: https://www.cncf.io/blog/2018/01/10/look-back-kubecon-cloudnativecon-north-america-2017-part-1/
[Kubernetes]: https://www.weave.works/technologies/weaveworks-on-aws/
[CI_CD]: https://en.wikipedia.org/wiki/CI/CD
[Link 2]: https://blog.gruntwork.io/why-we-use-terraform-and-not-chef-puppet-ansible-saltstack-or-cloudformation-7989dad2865c
[Link 3]: https://www.thoughtworks.com/insights/blog/infrastructure-code-reason-smile
[KubeCon_Google Cloud Platform_GitOps]: https://www.weave.works/press/releases/weave-cloud-on-the-google-cloud-platform/
[Link 4]: https://www.youtube.com/watch?v=BSqE2RqctNs&list=PLj6h78yzYM2P-3-xqvmWaZbbI1sW-ulZb&index=67
[Link 5]: https://www.slideshare.net/weaveworks/gitops-modern-best-practices-for-high-velocity-app-dev-using-cloud-native-tools
[Screen_Shot_2018-01-17_at_09.39_.03_.png]: http://dockone.io/uploads/article/20180129/75f96b37ea06471e81ef162a16eb5ce4.png
[Google_Weave Cloud]: https://go.weave.works/gcp
[Weave Cloud]: https://www.weave.works/product/cloud/
[weave_deploy.png]: http://dockone.io/uploads/article/20180129/0c4c1a623c7fde86930fcc5187f18ac1.png
[Weave Flux]: https://github.com/weaveworks/flux
[GitOps]: https://www.weave.works/blog/the-gitops-pipeline
[Weave Cloud 1]: https://cloud.weave.works/
[Link 6]: http://dockone.io/alexis@weave.works
[Link 7]: https://www.youtube.com/watch?v=07jq-5VbBVQ
[Link 8]: https://www.youtube.com/watch?v=07jq-5VbBVQhttps://www.youtube.com/watch?v=07jq-5VbBVQ
[GitOps 1]: https://www.weave.works/blog/gitops-part-3-observability
[gitops_cd_pipeline.png]: http://dockone.io/uploads/article/20180129/738354e168e51e07e32b2a1c870b0e57.png
[Sealed Secrets]: https://github.com/bitnami/sealed-secrets
[Serverless]: https://www.youtube.com/watch?v=8P-aXKylCVs
[Weave Cloud_Sealed Secrets]: https://engineering.bitnami.com/articles/secure-gitops.html
[Helm charts]: https://codeengineered.com/blog/2018/helm-review-2017/
[KubeCon]: https://www.youtube.com/watch?v=WugC_mbbiWU
[Istio]: https://www.weave.works/blog/istio-weave-cloud/
[OpenFaaS]: https://www.weave.works/blog/colorisebot-openfaas-and-weave-cloud
[Kubeflow]: https://www.weave.works/blog/kubeflow-and-weave-cloud
[Monkigras]: https://monkigras.com/
[Link 9]: https://monkigras.com/speakers/
[monkigras7.png]: http://dockone.io/uploads/article/20180129/987447b588a019f5779037445ea447b5.png