Dev Note 2023.11

개발 노트 를 작성하게 된 이유
  • 모르는 것이 너무 많은데, 새로운 것도 너무 많다.
  • 짧은 순간 몰랐던 것에 대해서 지나치지 말고 기록하자.
  • 기록한 내용을 꼭 한번 정리하자.
개발 노트 나만의 작성법
  1. 모든 생활 속에서 모르는 것이 있는 순간, !! 그때 바로 !! 개발 노트 Question 질문 기록한다!
  2. 작성한 Question 질문꼭! 다시! Answer 답변 을 정리한다!

Note

Date Subject
2023/11/23 RDB to Amazon S3 데이터 이관 (feat. Athena)

RDB to S3 데이터 이관 (feat. Athena)

Amazon S3

점점 커지는 RDB Table, S3로 귀양 보내고 Athena로 불러오기 - feat. Optimization with Spark Bucketing

  • 타사의 RDB 데이터를 S3 스토리지화 작업 관련 블로그를 보고, Amozon S3 를 활용한 데이터 저장, 조회 방식이 궁금해졌다.
  • 과연, Amozon S3 를 활용한 최적의 데이터 레이크를 구성하기 위해서, 데이터 파티셔닝 or 버켓팅 에 대한 학습도 필요할 것 같다.