[ChemDSRC] 클라우드이용 계획

1. Google Colab Pro

colab.research.google.com/signup

Colab Pro

Google Colab은 AI개발자들을 위해 구글에서 제공하는 무료 클라우드 서비스로써 jupyter 노트북 개발 환경을 제공합니다. 내부적으로는 코랩 + 구글드라이브 + 도커 + 리눅스 + 구글클라우드의 기술스택으로 이루어진 것으로 알려져 있습니다.

 Colab Pro는 월 9.99$의 가격으로 더 빠른 GPU 및 TPU에 우선적으로 엑세스 할 수 있는 서비스를 제공합니다. 더 긴 런타임을 제공하며 연결이 끊기는 빈도가 낮아집니다. 또 더 큰 RAM과 디스크 용량을 제공합니다. 

COLAB PRO SPEC

CPU : Intel Xeon 2.3GHz 4core , TPU활성화시40core

RAM : 24GB(고용량 RAM활성화시), tpu활성화시 최대 38GB

HDD : 256GB

GPU : 선점형으로 nvida v100, p100 제공

가격 월 9.99$(선불형)

 

2. (GCP) Google Cloud Platform

2-1 Compute Engine

가상머신 인스턴스를 제공하는 서비스 입니다. 

고성능 컴퓨팅이 가능하며 최대 vCPU 224개 1.33TB 메모리사용가능하며 사용한 만큼 초당 비용이 청구 됩니다.

vCPU 224개 896GB메모리 기준 시간약 당 7.5$가 정구됩니다. 

vCPU 4개인 colab대비 56배 빠른 속도로 머신러닝 모델을 학습가능합니다. 

2-2 GCS(Google Cloud Storage)

cloud.google.com/storage/pricing?hl=ko

구글 클라우드 스토리지는 버킷을 생성한 후 !gsutil 명령어를 통해 가상머신과 파일을 주고 받을 수 있습니다

colab이나 gcp vm에서 굉장히 빠른 속도로 데이터를 업로드 하거나 다운로드 할 수 있어 굉장히 편리합니다.

colab의 TPU를 활용하기 위해선 gcs에 학습할 데이터를 tfrecord형태로 업로드 하여야 합니다.

스토리지 사용량, 네트워크 사용량, 작업 사용량 등에 따라서 가격 책정 --> 한달에 50GB사용,시 1.19$수준(후불형)

 

 

견적

1. computing engine 

vCPUs:  224

RAM : 896GB

비선점형으로 1달에 60시간 사용시 : 575.67$ 

선점형으로 1달에 60시간 사용 : 141.31$

2. google cloud storage

storage : 100gb

1달 사용시 2$

 

cloud.google.com/products/calculator/#id=c9fb855c-f0f7-41e3-bfce-2274652b7af9

Google Cloud Platform 가격 계산기

 

비선점형

선점형.