Server (1) 썸네일형 리스트형 [AWS] Serverless Architecture 사용한 주식 메타 수집 배치 작성 기존에 Docker Compose + Airflow로 구성된 주식 메타 수집 배치를 작성했었다. 하지만 내가 필요할 때 직접 실행해줘야하는 부분이 싫어서 자동화하기로 했다. AWS의 여러 서비스들을 보면서 자동화 할 방법을 찾아보다가 MWAA라는 이름으로 AWS에서 관리형 Airflow를 제공하고 있었다. 기존에 사용하던 DAG가 있었기 때문에 DB를 DynamoDB로 바꾸고 일부 코드만 수정해서 바로 사용이 가능할 정도로 편리했다. 직접 설치해서 사용하는 것 보다 훨씬 간단했지만 생각보다 비용이 많이 나왔다. MWAA 환경을 테스트하느라 한 두 번 정도 만들었고 10~20분 정도 도는 Task를 몇 번 실행하고 나니 $20~30 정도가 청구되었다. 그래서 AWS 비용 견적을 대충 보니 달마다 $400가.. 이전 1 다음