Pod 스케줄링 지연 감지
Pending에서 기다린 모든 Pod와 대기 시간, 그 뒤에 있던 스케줄러 메시지를 기록하고, Kubernetes가 이벤트를 지운 뒤에도 남겨 둡니다.
Pod가 Pending에서 기다렸는데, FailedScheduling 이벤트는 1시간 뒤 사라집니다
kubernetes.io, Debug Pods, Resource Management for Pods and Containers, kube-apiserver 레퍼런스(--event-ttl, 기본값 1h0m0s).
"Pod가 Pending에 머물러 있다면 노드에 스케줄될 수 없다는 뜻입니다"(kubernetes.io). 이유는 FailedScheduling 이벤트에 "0/42 nodes available: insufficient cpu" 같은 메시지로 남습니다.
kube-apiserver는 기본적으로 이벤트를 1시간만 보관합니다(--event-ttl). 밤사이 생긴 지연은 아침이 되면 이유가 남아 있지 않습니다.
기본 이벤트 보관 1시간: kube-apiserver --event-ttl (kubernetes.io). 행과 conditions history: Wave Pod Scheduling Delay 문서. 12분 대기, 시각, 3시간 뒤 확인은 설명용 예시입니다.
Wave가 하는 일
- Pod생성됨, phase Pending
- 스케줄kube-scheduler맞는 노드를 찾지 못함
- 노드 없음이벤트FailedScheduling, 이유 포함
- 1h TTLkube-apiserver기본적으로 1시간 뒤 이벤트 삭제
- Wave Agent모든 노드에서 Pod 상태 전송
- gRPCWave CorePod마다 Pending 시간 측정
- Pod별Conditions history모든 스케줄러 메시지를 시간과 함께
- 보관Wave Console지연 테이블, 기본 7일 범위
대기 시간을 잽니다
지연된 Pod마다 스케줄링 지연 시간, 워크로드, 네임스페이스, 상태(Resolved 또는 Pending)가 한 줄로 기록됩니다. KPI 카드는 최근 24시간의 전체, 평균, 해결, 미해결 지연을 보여 줍니다.
이유를 남깁니다
Conditions history는 스케줄러 condition을 시간과 메시지와 함께 순서대로 남깁니다. 예: "0/5 nodes are available: 2 Insufficient cpu". PVC를 쓰는 Pod는 볼륨이 바인딩되지 않은 이유도 보여 줍니다.
지연이 언제 생기는지 봅니다
시간대별 평균 Pending 시간 차트로 지연이 배포나 피크 시간대에 몰리는지 확인할 수 있습니다. 기본 범위는 최근 7일입니다.