Kubecost - Kubernetes 开支监控和管理

???URL: https://www.kubecost.com/

??Description:

Kubeccost 为使用 Kubernetes 的团队提供实时成本可视化和洞察，帮助您持续降低云成本。

昨天浏览 Kubectl 插件的时候发现了 Kubecost，一看惊为天人啊，这个功能对于运营团队和 PM 团队领导来说太重要了。直接把监控数据换算成钱，而且明确告诉你钱花在哪个 namespace、哪个应用、哪个标签、哪个 deployment下，明确告诉你那些钱花得值、哪些钱浪费了，有哪些办法可以减少浪费… 真的都是实打实的「降本」功能。

下面详细介绍一下。

亮点：监控和降低云成本

Kubeccost 为使用 Kubernetes 的团队提供实时成本可视化和洞察，帮助您持续降低云成本。

产品功能

??? 成本分摊

按 Kubernetes 概念划分成本，包括部署（Deployment）、服务（Service）、命名空间（Namespace）、标签（Label）等等。开销视图可以跨越单个视图中的多个集群或通过单个 API 端点。

?? 统一成本监控

将 Kubernetes 的成本与任何外部云服务或基础设施的支出结合起来，就可以获得一个完整的图景。可以分摊外部成本，然后归因于任何Kubernetes 概念，以实现综合支出。

?? 成本优化方案

在不牺牲绩效的前提下接受动态的建议。优先考虑关键基础设施或应用程序更改，以提高资源效率和可靠性。

?? 开销警报和治理

alerts:  Kubecost 产生关于群集数据的警报
     在命名空间 `kubecost` 的每日预算警报
  - type: budget  支持: 预算, recurringUpdate, 等.
    threshold: 50  预算警报所需
    window: daily  或 1d
    aggregation: namespace
    filter: kubecost

在成本超支和基础设施中断风险成为实时通知问题之前，迅速捕捉它们。通过集成像 PagerDuty 和 Slack 这样的工具来保留工程工作流。

而且可以运行在以下环境：

• Azure
• AWS
• Google Cloud
• 内网环境
• Kubernetes
• 本地部署

安装

可以使用 Helm Chart 进行安装。

![[K8S 实用工具之四 - kubectl 实用插件cost https github com kubecost kubectl-cost]]

安装见这里：《K8S 实用工具之四 - kubectl 实用插件：cost》

部署完成后，访问 kubecost-cost-analyzer 的 9090 端口即可查看 UI，Ingress 方式或者 port-forward 都可以。

kubectl port-forward --namespace kubecost deployment/kubecost-cost-analyzer 9090

升级

helm repo update && helm upgrade kubecost kubecost/cost-analyzer -n kubecost

卸载

也是 Helm：

helm uninstall kubecost -n kubecost

?? 实际效果展示

以我的集群为例，这展示的不是 UI，这展示的是白花花银子、绿油油的美元 ?? 啊！

Kubecost 有以下几大菜单项，各个都是省钱能手。

1. ??? Overview（总览）
2. ?? Cost Allocation（成本分摊）
3. ?? 资产
4. ?? 节流
5. ?? 健康状态
6. ?? 报告
7. ?? 开销警报

总览

通过 port-forward 方式，访问 http://localhost:9090，首先的页面平平无奇：

Kubecost 第一屏：Cluster 集群 1, 5 个节点，每月开销 138.39 美元。

点进去后，真正的大杀器来了：

• 左上角：识别到 5 条省钱小妙招，每月可以帮我节省 $93.64。??

• 右上角：每月开销 $138.39，成本效益 2.7％，97.3% 都让云厂商白嫖啦 ??

• 左下角：每月集群开销，基于资源价格的每月运行费率费用走势图，这里还可以拆分到：

  • 计算：

    

  • 内存

    

  • 存储

    

  • 此外！点击右侧「CLUSTER METRICS」还可以直接跳转到我们熟悉的 Grafana 仪表板，查看监控指标和 ?? 的具体联系。（下一篇再补充）

• 右下角：资源浪费率（??资源利用率），基于当前已购的资源和过去 7 天的用量

  • 计算：每月空跑 $105.10 ??
  • 内存：每月空跑 $20.51 ??
  • 存储：每月空跑 $9.10 ??
  • 刨去空跑，我的应用主要的消耗在内存的 $1.34，另外存储方面 System 用了 $1.53

  

Overview 继续下拉，还是震惊：

• 左上角：基于 Controller 维度的成本分摊，根据过去 2 天的资源消耗，算出 Controller 的每月分摊成本，比如我的：
  • kubecost/deployment:kubecost-cost-analyzer 成本占比 $8.37 (17.1%)
  • monitoring/statefulset:prometheus-prometheus-operator-prometheus 成本占比 $5.83(11.9%)
  • monitoring/statefulset:alertmanager-prometheus-operator-alertmanager: 成本占比 $2.81(5.7%)
• 右上角：基于 Service 维度的成本分摊，根据过去 2 天的资源消耗，算出 Service 的每月分摊成本，比如我的：
  • kubecost/kubecost-cost-analyzer 成本占比 $8.37 (17.1%)
  • …
• 左下角：基于 NameSpace 维度的成本分摊，以及成本效益评分（1-100分），比如我的：
  • kubecost：每月开销 $10.74，效益 22 分，不及格！??
  • monitoring：每月开销 $9.63，效益 42 分，不及格！??
  • crossplane-system：每月开销 $5.70，效益 5 分，战五渣！ ??
  • kube-system：每月开销 $2.71, 效益 17 分，不及格！??
  • loki-stack：每月开销 $0.66，满分！（Loki YYDS ？）??
• 右下角：基础架构健康度，94 分（集群运行状况评级是对基础设施可靠性和性能风险的评估，分数范围从1-100），属于花钱保平安了这是。??

?? 提示：

成本效益定义为 CPU 和 RAM 的(使用量 / request)。如果使用了资源，但没有 request 资源，那么效率被认为是无限的。

成本分摊

进入第二个菜单，成本分摊，效果如下：

细粒度到：CPU、GPU、RAM、PV、Network、LB、Shared。

另外，成本效益可以根据非常多的维度去进行分析，我想应该可以满足领导的需求：

资产

?? 提示：

资产和公有云的信息对接后，可以获得更丰富的信息，如：云账号、供应商类型等。

目前版本可以对接：AWS 和 GCP，但是是付费功能。

下图为资产信息：

也可以从多个维度拆分：

悬停到信息按钮，会告诉你计费单位：（计费单价可调整的）。如下图：

• 每小时 Node 开销为：$0.03733。

节流

如下图，可以评估每月大概能省多少钱，节省的比例。以及具体的节流措施：

• 管理低利用率节点
• 本地磁盘利用率低
• Pod 配置的 Request 太多
• 识别到潜在的不用的 wordload

健康状态

这个功能比较一般，就是类似 K9S 的 popeye。效果如下图：

• 有 Pod pending
• Worker node 没有分散在多个可用区（这个提示不错???）
• 集群没有 master 副本

点进去还会有详细的指南，如下图：

报告

报告就是基于 成本 和 资产两个维度，根据上面的仪表来定制定期的报告。

成本警报

成本警报就是告警，主要的区别是基于??的维度：

• 反复出现类
• 成本效益类
• 预算类
• 开销变化类（如上文产品功能中的告警就是开销突然上升了 50%）
• 健康类
• 诊断类

设置

定制化还挺全面的，说一些我认为实用的配置吧：

1. 配置 Label，比如：租户对应的 Label 是 Tenant，部门对应的 Label 是 Apartment，产品对应的 Label 是 app…
2. 价格类设置，可以设置：
   1. 折扣
   2. 共享开销比例、对应的 NS、Label 等
   3. 单价
   4. 货币

总结

完整看下来，如果让运营团队和 PM 团队领导看到，一定会爱不释手的。??????

三人行, 必有我师; 知识共享, 天下为公. 本文由东风微鸣技术博客 EWhisper.cn 编写.