학습 러너 · 데이터셋 캐시
이 테넌트의 학습 Job 상태 확인·중지·강제 종료, 학습 데이터셋 캐시(PVC) 정리
필요 권한: 설정ADMIN
학습 기능이 켜진 테넌트에는 학습을 운영하는 화면 두 개가 있습니다. 학습을 만드는 일은 워크스페이스의 학습 화면에서 하고, 여기서는 돌고 있는 것과 쌓인 것을 돌봅니다.
학습 러너
학습은 모두 Kubernetes Job 으로 실행됩니다. 학습 러너 화면은 이 테넌트의 러너 상태와 지금 돌거나 기다리는 학습 Job 을 보여 줍니다. 다른 테넌트의 Job 은 보이지 않습니다.
| 칸 | 뜻 |
|---|---|
| 러너 · 클러스터 | 러너 종류(kubernetes)와 클러스터 사용 가능 여부 |
| 실행 중 · 대기 | 지금 도는 학습 수와 순서를 기다리는 학습 수 |
| 동시 실행 상한 · 대기열 크기 | 한꺼번에 돌릴 수 있는 수와 줄 선 수 |
활성 Job 표에는 학습 실행, 상태, 현재 스텝, Job 이름, 소유자가 보이고, 오른쪽에 제어 버튼이 있습니다.
| 버튼 | 하는 일 |
|---|---|
| 중지 | 트레이너가 현재 epoch 을 마치고 체크포인트(last.pt)를 저장한 뒤 안전하게 끝납니다. 유예 시간을 넘기면 강제 종료됩니다 |
| 강제 종료 | Job 을 바로 지웁니다. 멈춰서 응답하지 않는 트레이너에만 씁니다 |
데이터셋 캐시
학습 전에 데이터셋을 파드에 내려받는 데 시간이 걸리므로, 한 번 내려받은 데이터셋은 테넌트 네임스페이스의 볼륨(PVC)에 캐시로 남겨 다음 학습이 곧바로 시작되게 합니다. 대신 클러스터 저장소를 차지하므로 가끔 정리합니다.
- 사용량 카드: 캐시 전체 크기, 클레임(PVC) 수와 클레임당 상한, 자동 정리 기준(예: 14일간 미사용 시 자동 정리). 사용량은 디스크를 잰 값이 아니라 내려받아 둔 파일 크기의 합입니다.
- 클러스터 캐시 (PVC) 표: 데이터셋별 클레임, 사용량/상한, 마지막 사용, 삭제 시(볼륨 회수 정책).
- 볼륨 (PV) 표: 클레임이 사라진 뒤에도 남은 볼륨.
- 오래 쓰지 않은 데이터셋 행의 비우기 를 눌러 그 캐시를 지웁니다. 전부 지우려면 전체 비우기.
- 행의 삭제 시 가
Retain이면 클레임을 지워도 볼륨이Released로 남아 디스크를 계속 차지합니다. 아래 볼륨 (PV) 표에서 그 볼륨의 지우기 를 눌러야 실제로 회수됩니다.