2023년 DE 하면서 배운점올해도 2023년 한 해 동안 DE를 하면서 배운 점들을 정리해보려고 한다. 올해는 특히 해결해야할 이슈도 많았고 개발한 것도 많기 때문에 할 이야기가 많았다.Jan 7Jan 7
Airflow 스케줄링과 Execution Date 뽀개기Airflow 스케줄링과 Execution Date를 정리했습니다. DAG는 언제 수행되는지, Execution Date는 어떻게 설정되는지, Schedule Interval을 변경할 때의 주의사항은 무엇인지 알아봅니다.Jun 11, 2023Jun 11, 2023
데이터 중심 애플리케이션 설계 리뷰아마존에서 무려 4119개의 레이팅이 있고 별점 4.8/5.0에 이르는 분산 시스템 및 데이터 분야 책의 명작을 읽었다. 다 읽는데 거의 한 달 반이 걸렸다. 내용이 방대한 만큼 한 번 정리해보면 좋을 것 같아서 리뷰를 작성해본다.Jun 4, 2023Jun 4, 2023
BE에서 DE 첫걸음을 하면서 느낀 점2022년 중반쯤 데이터 솔루션을 만드는 새로운 회사를 가면서 데이터 수집 및 파이프라인 업무를 처음 해봤다. 전에는 BE에 가까운 업무를 했다. 익숙하지 않은 분야를 접하면서 느끼고 배운 점들을 공유해보려고한다.Jan 15, 2023Jan 15, 2023
객체 지향의 사실과 오해 리뷰객체 지향의 사실과 오해라는 책을 읽었다. 앞으로 소프트웨어 개발을 할 때 많은 도움이 될 것 같은 뜻 깊은 책이라 리뷰를 남기게 됐다.Dec 26, 2021Dec 26, 2021