Google Colab 파일 관리 가이드: 업로드, 다운로드 및 영구 저장 방법

섹션별 상세

Google Colab은 사용자에게 임시 가상 머신(VM)을 할당하며, 세션이 종료되거나 런타임이 재설정되면 기본 작업 디렉토리인 /content에 저장된 모든 데이터는 영구적으로 삭제된다.

로컬 환경의 파일을 Colab으로 가져오기 위해 files.upload() 함수를 호출하여 파일 선택기를 띄우거나, 왼쪽 사이드바의 파일 탐색기 영역에 파일을 직접 드래그 앤 드롭하여 업로드할 수 있다.

python

from google.colab import files
files.upload()

로컬 컴퓨터의 파일을 Colab 가상 머신으로 업로드하는 코드

학습된 모델이나 결과물을 로컬로 내려받으려면 files.download('파일명') 코드를 실행하며, 이는 브라우저의 다운로드 기능을 통해 즉시 처리된다.

데이터의 영구 보존을 위해서는 drive.mount('/content/drive') 명령으로 Google Drive를 연결해야 하며, 이후 /content/drive/MyDrive 경로를 통해 드라이브 내 파일에 자유롭게 접근하고 저장할 수 있다.

python

from google.colab import drive
drive.mount('/content/drive')

Google Drive를 Colab 파일 시스템에 연결하여 영구 저장소를 확보하는 코드

프로젝트의 가독성과 유지보수를 위해 data, models, outputs 등으로 구분된 표준 폴더 구조를 구축하고, BASE_PATH와 같은 변수를 활용하여 절대 경로를 관리하는 것이 권장된다.

네트워크를 통한 직접 다운로드는 !wget 명령어나 Python의 requests 라이브러리를 사용하여 수행하며, 이는 대용량 데이터셋이나 사전 학습된 모델을 효율적으로 가져오는 방식이다.

python

import zipfile
with zipfile.ZipFile('dataset.zip', 'r') as zip_ref:
    zip_ref.extractall('/content/data')

업로드된 ZIP 압축 파일을 특정 디렉토리에 해제하는 예시

bash

!wget https://example.com/data.csv

셸 명령어를 사용하여 인터넷 URL에서 파일을 직접 다운로드하는 방법

런타임(Runtime): — 프로그램이 실행되고 있는 동안의 시간 또는 그 실행 환경을 의미한다. Google Colab에서는 사용자에게 할당된 가상 머신 세션을 뜻하며, 이 세션이 종료되거나 초기화되면 임시 저장된 모든 데이터가 삭제된다.
마운트(Mount): — 운영체제가 특정 저장 장치나 외부 파일 시스템을 현재의 파일 시스템 구조 내의 특정 위치에 연결하여 접근 가능하게 만드는 과정이다. Colab에서는 Google Drive를 가상 머신의 디렉토리처럼 사용하기 위해 이 과정이 필수적이다.
가상 머신(Virtual Machine): — 물리적 하드웨어 위에 소프트웨어로 구현된 컴퓨터 환경으로, 독립적인 운영체제와 자원을 할당받아 실행된다. Colab은 각 사용자에게 독립된 가상 머신을 제공하여 로컬 설정 없이 Python 코드를 실행할 수 있게 한다.
Wget: — 네트워크를 통해 파일을 다운로드하기 위한 명령줄 유틸리티이다. HTTP, HTTPS, FTP 프로토콜을 지원하며, Colab 환경에서 외부 서버에 저장된 대용량 데이터셋이나 모델 파일을 빠르게 가져올 때 주로 사용된다.