아티팩트 스토리지 및 메모리 할당 관리

W&B 아티팩트의 스토리지와 메모리 할당을 관리합니다.

W&B는 기본적으로 미국에 위치한 비공개 Google Cloud Storage 버킷에 아티팩트 파일을 저장합니다. 모든 파일은 저장 상태와 전송 중 모두 암호화됩니다.

민감한 파일의 경우 Private Hosting을 설정하거나 reference artifacts를 사용할 것을 권장합니다.

학습 중 W&B는 로그, 아티팩트, 구성 파일을 다음 로컬 디렉터리에 저장합니다:

File	Default location	To change default location set:
logs	./wandb	wandb.init의 dir 또는 WANDB_DIR 환경 변수
artifacts	~/.cache/wandb	WANDB_CACHE_DIR 환경 변수
configs	~/.config/wandb	WANDB_CONFIG_DIR 환경 변수
staging artifacts for upload	~/.cache/wandb-data/	WANDB_DATA_DIR 환경 변수
downloaded artifacts	./artifacts	WANDB_ARTIFACT_DIR 환경 변수

환경 변수를 사용해 W&B를 구성하는 방법에 대한 전체 가이드는 environment variables reference를 참고하십시오.

wandb가 초기화되는 머신에 따라 이러한 기본 폴더가 파일 시스템의 쓰기 가능한 위치에 없을 수 있습니다. 이로 인해 오류가 발생할 수 있습니다.

​

로컬 아티팩트 캐시 정리

W&B는 공통 파일을 공유하는 여러 버전에서 다운로드 속도를 높이기 위해 아티팩트 파일을 캐싱합니다. 시간이 지나면 이 캐시 디렉터리가 매우 커질 수 있습니다. 캐시를 정리하고 최근에 사용되지 않은 파일을 제거하려면 wandb artifact cache cleanup 명령을 실행하십시오.

다음 코드 스니펫은 캐시 크기를 1GB로 제한하는 방법을 보여줍니다. 아래 코드를 터미널에 복사해 붙여넣으십시오:

$ wandb artifact cache cleanup 1GB