본문 바로가기
Development/Python

Advanced Python Scheduler

by 곽동현 이스텔리앙 2020. 2. 18.

Advanced Python Scheduler (APScheduler)


Python으로 이뤄진 전처리나 ETL 을 주기적으로 실행해야하는 경우, dynamic task scheduler가 팔요하다. 이에 대한 선택지로는 Airflow나 dask, zenkins 등이 있으나, 매우 간단하게 single machine에서의 job scheduling으로는 좀 오버스팩이 아닐 수 없다. 이러한 경우에 APS를 사용하면 편리하다.




설치방법

pip install apscheduler



API문서

https://apscheduler.readthedocs.io/en/stable/modules/schedulers/base.html#module-apscheduler.schedulers.base



간단한 예제

from datetime import datetime
from apscheduler.schedulers.blocking import BlockingScheduler
from simpduler.scheduler.execute import run_all

def get_the_first_schedule():
now = datetime.now()
date_time = now.strftime("%Y-%m-%d")
date_time = date_time + " 03:00:00"
print("Next schedule:", date_time)
return date_time


def build_scheduler():
scheduler = BlockingScheduler()
scheduler.add_executor('processpool')
scheduler.add_job(run_all, 'interval', days=1, start_date=get_the_first_schedule())

try:
scheduler.start()
except (KeyboardInterrupt, SystemExit):
pass


'Development > Python' 카테고리의 다른 글

Python에서 directory 관련 명령어  (0) 2020.02.19
Python 코드 안에서 git과 pip 사용하기  (0) 2020.02.19
Advanced Python Scheduler  (0) 2020.02.18
Airflow  (0) 2020.02.11
Black: Uncompromising Python Coding Convetion  (0) 2020.02.04
Python 파일을 exe파일로 컴파일하기  (0) 2020.02.04

댓글0