[python] Anaconda 환경 yaml파일 export 및 import (환경 생성 create, 활성화 activate 등)

 

 

Anaconda 는 python 패키지 관리를 지원하는 프레임워크입니다. Anaconda를 사용하는 가장 큰 장점 중에 하나는, 용도에 맞추어 가상 환경을 만들고 그 환경 내에서만 패키지 의존성을 관리가 가능하다는 점입니다. 이게 왜 큰 장점이 되느냐, 이 가상 환경 (environment)만 옮겨주면 해당 코드를 그대로 실행할 수 있기 때문이죠. 이러한 기능은 코드 배포를 간편하게 만들어줍니다. 공개 소프트웨어나, 내 논문을 구현 코드를 공개하고자할 때, 개발하고자하는 응용을위한 전용 환경을 만들고, 그 환경을 그대로 설치할 수 있도록하는 의존성 정보만 배포해주면 누구든지 동일한 환경을 재현할 수 있습니다.

 

오늘은 가상 환경 관리와 관련된 몇가지를 간략히 정리해보겠습니다.

 

 

---

 

목차

1. conda 환경 리스트 조회
2. conda 환경 생성
3. conda 환경 활성화
4. conda를 사용한 패키지 설치
5. 현재 활성화되어있는 conda 환경 export 하기
6. yaml 파일로부터 conda 환경 import 하기

 

---

 

🧸 conda 환경 리스트 조회

기본적으로 아나콘다를 설치할 때, bash 파일에 anaconda 를 자동으로 실행하도록 설정하는 게 디폴트입니다. 그래서 켤때마다 (base) 환경이 설정되어있는 것을 확인할 수 있죠. (만약 자동 설정을 하지 않았다면 anaconda 환경을 source하는 것부터 시작하십시오) 그리고 기본적으로 아나콘다 설치 시 설정한 경로가 base 환경이 위치한 곳이 됩니다. 그리고 추가적으로 생성하는 환경들은 envs 라는 폴더 밑에 생성되고 각 환경 별로 패키지 관리가 수행됩니다. 이것처럼 현재 내 Anaconda에 설치되어있는 환경 리스트는 다음의 명령어를 통해 조회할 수 있습니다.

 

 

 $ conda env list

 

 

아래 사진은 제 서버에 설치되어있는 환경들을 보여줍니다. 오픈소스를 실행할때도 환경을 만들고, 연구를 할때도 기본 base를 활용해서 각각의 패키지관리 환경을 만들어줘요. 그래야 나중에 배포할 때 패키지 수를 최적화하기 좋거든요.

 

 

 

 

🧸 conda 환경 생성 (from scratch)

 

$ conda create -n (환경 이름) python=버전

 

예를 들어서, hello라는 환경을 python 3.8 버전으로 생성한다고하면

 

$ conda create -n hello python=3.8

 

 

 

🧸 conda 환경 활성화

 

 

$ conda activate (환경 이름)

 

 

예를 들어서, hello라는 환경을 활성화한다고하면

 

$ conda activate hello

 

그리고 현재 활성화 된 python interpreter의 정보는 `which python` 명령어를 통해 확인할 수 있다. (ssh 인터프리터 설정 시 conda python 환경을 지정해주고싶을 때 해당 명령어를 통해 얻어지는 경로를 활용해줄 수 있다.)

 

 

🧸 conda 를 사용한 패키지 설치

 

오늘은 예로 pytorch 설치를 해보도록하겠다. 설치하고자하는 패키지 사이트에 들어가서 관련 설정을 해주면 어떤 명령어를 통해 설치할 수 있는 지 알려준다. 예를 들어, pytorch stable 2.0.0 버전을 linux 환경에서 conda 패키지 관리자로 CUDA 11.8 버전으로 설치하는 명령어는 아래와 같이 설정하여 얻을 수 있다. conda를 사용한 패키지 설치 기본 문법

 

$ conda install 패키지 명

 

conda 환경이 activate되어있을 때 pip를 통해 설치되는 패키지들도 모두 관리된다. 이 때, conda 환경에서 지정된 python에 맞는 버전의 pip가 호출되기 때문에, 별도의 pip 관리없이도 버전에 맞는 패키지들을 설치할 수 있다.

 

$ pip install 패키지 명

 

 

 

🧸 현재 활성화 되어 있는 conda 환경 export 하기

hello라는 conda 가상환경의 의존성 정보를 yaml 파일로 추출한다고해보자. 먼저, 해당 환경이 활성화 되어있어야한다. activate 옵션을 통해 내보내기를 할 환경을 활성화시킨다. 그 후 env export 명령어를 통해 원하는 yaml 파일로 의존성 정보를 모두 내보낼 수 있다.

 

 

(base) $ conda activate hello
(hello) $ conda env export > environment.yaml

 

 

 

 

🧸 yaml 파일로부터 conda 환경 import 하기

 

사실 파일로부터 import하는 것은 yaml 파일을 참고해서 새로운 환경을 생성하는 것과 같다.

 

 conda env create --file environment.yaml

 

 

 

 

끝 ◼︎