리눅스 디렉토리 내 용량 확인

 

 

분류 대회를 진행하기 위해 받은 컨테이너 서버

깡통 상태에서의 용량은 사용 가능 40GB 정도였는데 어느새 보니까 왜 용량이 10GB도 없지...?

아는 명령어라곤 df -h 밖에 없는데 용량 확인 명령어는 종종 쓸 것 같아서 참고용으로 간단하게 작성해보았다

 

df -h를 사용하면 현재 사용하는 시스템 전체의 용량들을 한번에 확인 가능하다

하지만 내가 확인하고 싶은 건 전체가 아니라 내가 메인으로 사용하고 있는 디렉토리

 

 

 

---

 

 

 

용량 순으로 정렬해서 보기

 

• sort -hr : 숫자 단위 포함(human-readable) 내림차순 정렬
• 가장 큰 파일/폴더를 바로 파악 가능

 

du -h --max-depth=1 [확인하고 싶은 위치] | sort -hr

(my_project) root: du -h --max-depth=1 | sort -hr
12G     .
11G     ./my_project
934M    ./.cache
52M     ./.local
1.7M    ./.ipython
40K     ./.config
8.0K    ./.nv
8.0K    ./.jupyter

 

 

 

위의 명령어에서 확인하고 싶은 위치를 추가해주면 아래처럼 확인할 수 있다

(my_project) root1: du -h --max-depth=1 /data/ephemeral | sort -hr
12G     /data/ephemeral/home
12G     /data/ephemeral
16K     /data/ephemeral/lost+found

 

 

가장 큰 용량이 있는 디렉토리를 타고 또 들어가서 실행시켜주면 정확히 어떤 위치에서 얼마나 용량을 차지하는지 확인 가능

(my_project) root: du -h --max-depth=1 /data/ephemeral/home | sort -hr 
10G /data/ephemeral/home 
9.3G /data/ephemeral/home/.cache 
675M /data/ephemeral/home/my_project 
52M /data/ephemeral/home/.local 
1.6M /data/ephemeral/home/.ipython 
40K /data/ephemeral/home/.config 
8.0K /data/ephemeral/home/.nv 
8.0K /data/ephemeral/home/.jupyter

• .cache에서 무려 9.3G를 차지하고 있다
• 대체 뭐가 들어있길래... 캐시 파일은 대부분 지워도 안전하다고는 하지만 그래도 캐시에 어떤 내용물이 있는지 확인해보았다

 

 

 

명령어는 위와 동일, 위치만 추가해서 확인.

(my_project) root: du -h --max-depth=1 /data/ephemeral/home/.cache | sort -hr 
9.3G /data/ephemeral/home/.cache 
6.7G /data/ephemeral/home/.cache/uv 
2.6G /data/ephemeral/home/.cache/huggingface 
26M /data/ephemeral/home/.cache/pip 
32K /data/ephemeral/home/.cache/wandb 
32K /data/ephemeral/home/.cache/matplotlib

• uv가 가장 많았고 huggingface가 2번째
• huggingface는 아마 모델 파일들이 캐싱되서 저장된다고 들었는데 uv는 흠... 
• " uv 관련 캐시라면, 아마 프로젝트 실행 시 생성된 임시 데이터나 빌드 캐시일 가능성이 높음" 이라고 한다
• huggingface도 베이스라인으로 삼을 모델을 하나로 정했으니 다 비우고 필요한 것만 설치하는 걸로!

rm -rf /data/ephemeral/home/.cache/uv/* /data/ephemeral/home/.cache/huggingface/*

 

 

 

이전 회사에서 사용하던 엣지 디바이스도 그렇고 용량 관리를 잘 하는 것이 중요한 것 같다

특히 지금 사용하는 서버는 용량이 다 차거나 오버되면 서버가 아예 다운될 수도 있으니 신경쓰고 조심해야겠다