반응형 airflow설치3 gcp 인스턴스 생성 및 방화벽 생성하고 docker 및 airflow 설치하기 윈도우 버전 난 정말 제일 힘들었던 말하면 바로 docker와 airflow다블로그에 올린 것만 종류가 여러갠데전부 다 실패했다 -> 비용적인 문제와 메모리 문제 등등진짜 마지막으로 발견한게 gcp인데 드디어 내 노트북에 설정을 완료했다거의 3일내내 이거 오류 잡고 이해하는데 쏟아 부은 듯 하다 GCP 크레딧 생성1. GCP 란AWS 클라우드 서비스 중 하나로 간단하게 말하자면 GCP를 처음 가입하는 사람이라면 AWS보다 무료로 사용할 수 있는게 많은 서비스다 무료로 사용 가능한게 무려 41만원!!AWS 사용하다가 돈나오는게 열받는다면 GCP를 강력 추천하다 2. 새로운 프로젝트 생성Airflow라는 새로운 프로젝트를 생성준다 airflow 프로젝트로 변경도 설정 3. 인스턴스 만들기 이젠 인스턴스를.. 2024. 12. 18. docker 설치하고 airflow 설치하기 윈도우 이전 블로그들은 보면 ec2로 docker설치해보기 등등 램8기가와 aws를 비용으로 내지 않을려고 열심히 노력해봤다,,,나름 블로그 분들을 따라서 해봤지만 나홀로 이상한 오류가 나는 등,, airflow 사이트한버 열다가 하루종일 걸릴 것 같아서그냥 pc에 docker를 깔기로 했다결론부터 말하자면 docker설치하고 airflow 설치하는게 세상 너머ㅓㅓㅓㅓㅓ무 편하다 지금까지 내가 뭔 고생을 한건지 싶을 정도로,,정말 초간단,,나 저거 하는데 일주일 날린것 같은데,,노트북을 쓰지 말든지 해야지ㅣ,,,하하 window 기능 켜기 / 끄기 윈두우 검색 > windows 기능 켜기/끄기 > 리눅스용 하위시스템 클릭해서 재부팅한다 wsl 설치wsl --set-default-version 2먼저 w.. 2024. 11. 25. docker 설치 후 airflow 설치하기 윈도우 이전 내용에 이어서 이번엔 docker 설치한 후 airflow를 설치해볼 까한다 1. docker 활성화 시키기 먼저 docker 활성화 된 상태인지 확인 2. GitHub에서 Docker Compose 예제 다운로드그리고 Airflow를 Docker로 실행하기 위한 기본 설정 파일을 다운로드해야한다docker-compose.yml 파일이 필요GitHub에서 Airflow Docker Compose 파일을 다운로드 sudo apt updatesudo apt install git먼저 git이 설치되어 있는지 확인하고 git clone https://github.com/apache/airflow.gitcd airflow#docker위치 확인cd scripts/docker-composegit 파일 클론.. 2024. 11. 21. 이전 1 다음 반응형
