목록Data Engineering/Airflow (1)
내가 보려고 만든 블로그
Docker를 통해 Airflow local executor 설치해보기
우선 가장 먼저 Airflow 를 설치해줄 리눅스 서버 한대가 필요하겠다. 이 글에서는 AWS를 통해 Ubuntu 20.0.4 서버를 만들어주었다. 우선 다음과 같이 package update를 해주고 재부팅을 해준다. sudo apt update sudo apt upgrade -y sudo reboot 다음으로 Airflow를 설치하기 위해 필요한 도커를 다운로드 해준다. 다음의 커맨드를 사용하면 리눅스의 종류에 맞춰 알맞은 도커를 설치해준다. sudo wget -qO- http://get.docker.com/ | sh 다음으로 여러개의 컨테이너를 관리하기 용이한 docker-compose도 설치를 해준다. sudo curl -L "https://github.com/docker/compose/relea..
Data Engineering/Airflow
2021. 7. 25. 14:39