Karpenter Dashboard
Wave Console の 1 画面で、すべての Karpenter NodePool のノード、1 時間あたりのコスト、Spot 比率、中断、thrashing アラートを表示します。
NodePool が 1 時間にノードを 6 台作って消しても、理由を示す画面がありません
ノード 6 台は例示です。karpenter.sh v1.14 ドキュメント: Metrics, Disruption, Getting Started with Karpenter
Karpenter はデフォルトでは、状態を Prometheus メトリクスと Kubernetes events で報告します。入門ガイドの Grafana 構成には、本番環境の監視に必要な永続ストレージが含まれていません (karpenter.sh)。
Karpenter は、ノードに Pod が追加または削除されるたびに consolidation のタイマーをリセットします (karpenter.sh)。ノードが作成と削除を繰り返すとき、その理由は NodeClaims、events、メトリクス、AWS 請求書に分散しています。
ノード 6 台とその寿命は例示です。メトリクスとイベント: karpenter.sh v1.14 ドキュメント。Thrashing Pattern アラートとその項目: Wave Karpenter Dashboard ドキュメント。
Wave の仕組み
- KarpenterNodeClaim を作成・削除
- 出力PrometheusPrometheus 形式のメトリクス
- グラフ化Grafanaサンプルのダッシュボード、永続ストレージなし
- 手で照合エンジニアメトリクス、イベント、AWS 請求書を手で突き合わせる
- Wave Agentノード、NodePool、NodeClaim のデータを読む
- gRPCWave CoreKarpenter のデータを処理
- 確認Thrashing 検出短い間隔で作成と削除を繰り返すノード
- アラートWave ConsoleKarpenter > Overview: ノード、1 時間あたりのコスト、Spot 比率、アラート
Karpenter のデータを収集
Wave Agent がノード、NodePool、NodeClaim のデータを gRPC で Wave Core に送ります。Amazon EKS、Karpenter v0.32 以降、Helm の値 1 つ (karpenter.enabled) が必要です。
コストと Spot を 1 か所で
Wave Console の Karpenter > Overview に、Karpenter ノード数、1 時間あたりの総コスト、Spot 比率、アクティブな NodePool、Spot 中断が表示されます。NodePool ごとに 30 日間の中断と thrashing も表示されます。
Thrashing を見つける
Wave は、短い間隔で作成と削除を繰り返すノードを検出します。Thrashing Pattern アラートには、影響を受けたノード、理由、平均寿命、影響を受けた平均 Pod 数が表示されます。
1 つの NodePool を詳しく見る
NodePool ごとに、ノードのライフサイクルのタイムライン、状態の条件と 1 時間あたりのコストを持つ NodeClaim の一覧、中断イベントがあります。