PV容量予測
選んだ PersistentVolume ごとに、7 日後と 30 日後の使用量を容量と並べて予測します。いっぱいになる前に拡張や整理ができます。
データベースのボリュームが午前 2 時に 100% になり、書き込みが失敗し始めます
kubernetes.io, Kubernetes Metrics Reference, Persistent Volumes; Wave PV Capacity Forecast ドキュメント。午前 2 時という時刻は説明用の例です。
ボリュームがいっぱいになると書き込みが失敗し、データベースは読み取り専用に切り替わることがあります(Wave PV Capacity Forecast ドキュメント)。
Kubernetes はボリュームの使用量を kubelet のメトリクス kubelet_volume_stats_used_bytes と kubelet_volume_stats_capacity_bytes として公開しており、安定性レベルは ALPHA です(kubernetes.io)。これを代わりに見張ってはくれません。ルールとしきい値は利用者が自分で作ります。
PVC を拡張できるのは、StorageClass で allowVolumeExpansion が true に設定されている場合だけです(kubernetes.io)。そうでなければ、より大きなボリュームを用意してデータを移す必要があります。
PV ごとの Forecast、7 日と 30 日のスナップショット、Capacity に対する Used: Wave PV Capacity Forecast ドキュメント。いっぱいのボリュームで書き込みが失敗: Wave ドキュメント。曲線、午前 2 時、割合は説明用の例です。
Wave の仕組み
- アプリケーションPVC にデータを書く
- 書き込みkubeletボリュームの used と capacity のバイト数を報告
- メトリクス自作のルールしきい値を自分で決めて管理
- 拡張PVCStorageClass が拡張を許可するときだけ拡張
- Forecast トグルPV ごとにオン
- オプトインWave Core最低 7 日の使用量の履歴を保持
- 推移Forecast7 日後と 30 日後の使用量
- PV ごとWave ConsolePV ごとのチャート: Capacity に対する Used
ボリュームを選ぶ
予測はオプトインです。On / Off トグルで PV ごとにオンにし、データベース、Prometheus、Loki など重要なボリュームだけを対象にできます。
使用量を先へ延ばす
最低 7 日の履歴がたまると、Wave はボリュームごとに 7 日後と 30 日後の使用量を容量と並べて表示します。PV ごとのチャートは Capacity に対する Used に Forecast を重ねて描きます。カウントダウンはなく、リスクは推移を見て利用者が判断します。
間に合ううちに拡張する
StorageClass が拡張を許可していれば PVC を手作業で広げるか、使用量が決めたしきい値を超えたときにボリュームを拡張する PV Auto Expansion をオンにします。