메모리 누수 감지
컨테이너별 시간별 최솟값 메모리를 지켜보고 계속 올라가는 바닥선을 찾아내, 컨테이너가 OOMKilled 되기 전에 조치할 수 있게 합니다.
메모리가 하루 50 MB씩 늘어도, Kubernetes는 OOMKilled 전까지 아무것도 알려 주지 않습니다
kubernetes.io, Assign Memory Resources to Containers and Pods, Resource Management for Pods and Containers. 하루 50 MB는 Wave Memory Leak Detection 문서의 예시를 가져온 설명용 수치입니다.
limit보다 많은 메모리를 할당한 컨테이너는 "종료 후보가 되며", 커널은 메모리 limit을 OOM kill로 강제합니다(kubernetes.io). 그 순간까지 Pod는 Running 상태이고, 상태 어디에도 늘어나는 메모리에 대한 경고가 없습니다.
느린 누수는 평범한 톱니 모양 그래프 안에 숨어 있습니다. 가비지 컬렉션이 돌 때마다 메모리는 줄지만, 각 주기의 최저점은 매일 조금씩 올라갑니다.
메모리 limit에서의 OOM kill: kubernetes.io. 시간별 최솟값과 Steady Growth: Wave Memory Leak Detection 문서. 곡선, 하루 50 MB, limit, 날짜는 설명용 예시입니다.
Wave가 하는 일
- 컨테이너메모리가 limit을 넘음
- limit 초과Linux 커널OOM kill로 limit을 강제
- OOM killkubeletback-off를 두고 컨테이너를 재시작
- 상태kubectl describe pod장애 후에야 OOMKilled 표시
- Wave AgentcAdvisor와 함께 컨테이너별 메모리 수집
- gRPCWave Core시간별 최솟값을 최대 약 5일간 보관
- 시간별 바닥선누수 패턴Steady Growth 또는 Trend Based Growth, 신뢰도 점수 포함
- 감지Wave Console누수 탭과 OOM 위험 탭
바닥선을 지켜봅니다
Wave는 컨테이너마다 시간별 최솟값 메모리를 최대 약 5일 동안 추적합니다. 정상 사용은 오르내리지만, 누수는 이 바닥선을 계속 끌어올립니다.
패턴을 구분합니다
감지된 항목은 Steady Growth 또는 Trend Based Growth로 분류되고, 기준 메모리, 최근 메모리, 증가율, 신뢰도 점수가 함께 기록됩니다. 버블 차트는 빠르고 크게 새는 워크로드를 한쪽 모서리에 모아 보여 줍니다.
limit도 함께 확인합니다
Possible OOM Risk 탭은 누수 여부와 관계없이 지금 메모리 limit에 가까운 워크로드를 보여 줍니다. 어느 정도를 가깝다고 볼지는 OOM Risk Settings에서 정합니다.