본문 바로가기
반응형

DATA3

[DATA] ODS란 무엇인가? - 이 글은 제가 공부를 하며, 이해한 것을 바탕으로 작성하는 글입니다. - 그렇기에 틀리거나 잘못된 부분이 있을 수 있습니다. - 글의 오류를 발견하시면, 댓글로 말씀해 주시면 정말 감사하겠습니다. [1] 내용 설명 - ODS는 Operational Data Store의 준말로 운영 데이터 저장소라고 한다. 가장 일반적인 사용 방법은 다음과 같다. ODS는 막 생성된 많은 데이터(원천, 운영, prd 데이터)를 정형화 시킨 뒤(일정한 형태로 가공을 거친 뒤) 저장하여 유지, 관리하는 스테이징에 속하는 공간으로 DW를 구축하는데 중간 역할을 담당하는 공간을 말한다. 다른 목적은 아래와 같다. DW에 대규모 데이터에 대한 복잡한 쿼리를 수행할 수 있지만, ODS는 작은 데이터 집합에 대해 간단한 쿼리를 수.. 2022. 5. 8.
[ETL][1] ETL이란 무엇인가? - ETL이란? 각각의 의미는? - 저도 공부하는 중입니다. 틀리거나 잘못된 내용이 있으면 알려주셔요. 이전에 ETL에 대한 간단한 정의를 찾아보고, 이를 정리해 보는 글을 작성한 적이 있었는데, https://bramhyun.tistory.com/18 그 이후로 여러 자료들을 접하면서 조금 더 공부를 하게 되어서 ETL에 대한 글을 연재로 작성해 보려고 합니다. 1. ETL이란 ETL은 Extract , Transform, Load의 약자로, 한 문장으로 표현을 하자면, 아래와 같이 표현할 수 있습니다. 다양한 소스에 존재하는 데이터를 데이터 저장소에 수집하고, 이를 사용자들의 용도에 맞게, 데이터를 변형하고 사용 가능한 곳으로 옮기는 프로세스 그림을 보면서 이해를 해보도록 하겠습니다. 가장 왼쪽부터 보시면, 다양한 Data Sour.. 2021. 7. 31.
[ETL][0] ETL이란 무엇인가? - 이 글은 제가 공부를 하며, 이해한 것을 바탕으로 작성하는 글입니다. - 그렇기에 틀리거나 잘못된 부분이 있을 수 있습니다. - 글의 오류를 발견하시면, 댓글로 말씀해 주시면 정말 감사하겠습니다. ETL에 대한 간략한 정리가 필요하다 판단하여 공부를 하게 되었다. 개념이 잘 잡히지 않은 분들은 같이 읽어나가며 공부를 하는 것도 좋을 것 같다. 가장 먼저, ETL의 정의를 한번 살펴보자. 여러 정의를 가지고 읽어 보자 [1] 정의 1. ETL은 extract, transform, load를 의미하며, 조직 내외부의 복수의 source들로부터의 data를 data 분석을 위한 data warehouse, data mart 내로 이동시키는 process로서, 추출, 재구성(reformatting), 정제,.. 2021. 6. 28.
반응형