- mobaxterm에서 instance에 대한 session을 새로 등록하기 (탄력적ip를 사용하지 않는 경우)
- mobaxterm에 접속하여, 터미널에서
- .pid 를 지워야
airflow scheduler -D 명령어가 먹힘. 안지우면, airflow scheduler만 가능
- pid는 각 서비스별 프로세스 ID가 담긴 것으로, 원래 프로세스 종료되면 파일들이 삭제되는데, 정상종료 안되었을 경우, 삭제되지 않음.
- .pid가 남아있으면, schduler 실행 시, Airflow UI에 이전에 쓰던 DAGS들이 그대로 남아있음
- 예를들어, dags/old_dag.py의 dag_id를 ( old_dag_id → new_dag_id )로 바꾸고,
airflow schduler를 실행하면, airflow UI에서 확인 시, new_dag_id, old_dag_id 모두 존재하게 됨
# 1. 서버 다시 시작 ( -D 붙이면 백그라운드 실행 )
$ airflow webserver --port 8080 -D
# 2. airflow folder에서 아래 항목 삭제
rm airflow-scheduler.err
rm airflow-scheduler.pid # 비정상 종료시 남아있음
rm airflow-webserver-monitor.pid # 비정상 종료시 남아있음
# 3. 경로, 환경변수 설정
export AIRFLOW_HOME=~/airflow
# 4. 스케줄러 새로 시작 ( -D 붙이면 백그라운드 실행 )
airflow scheduler -D
catch up