[Database] 데이터 관련 용어 정리

주제영역 

기업이 사용하는 데이터의 최상위 집합으로 동일한 기능을 하는 데이터를 그룹으로 정의하여 관리하는 것을 의미한다. 하나의 주제영역으로 정의되는 데이터간의 관계는 밀접하고, 다른 주제 영역에 포함되는 데이터 간의 상호작은 최소화하도록 정의해야 한다. 제조업의 경우 인사, 생산, 판매, 자재 등으로 구성될 수 있다.

https://dataonair.or.kr/db-tech-reference/d-guide/da-guide/?mod=document&uid=280 

주제 영역 정의

 

CDC (Changed Data Capture)

데이터를 통합하기 위해 변경된 데이터를 캡쳐하여 다양한 운영 및 분석시스템에 실시간으로 전달하는 기술이다.

https://blog.naver.com/arkdata/222515632332

[IT 용어사전] CDC와 ETL 차이점

 

ETL (Extract, Transform, Load)

추출(Extract), 변환(Transform), 적재(Load)의 약자로 데이터 소스로부터 데이터를 추출하여 원하는 포맷으로 변환 후 타겟DB에 적재하는 기술이다. 

https://blog.naver.com/arkdata/222515632332

[IT 용어사전] CDC와 ETL 차이점

 

EAI (Enterprise Application Integratin)

엔터프라이즈 미들웨어를 인프라로 하여 다양한 이질적인 애플리케이션, 데이터, 플랫폼, 네트워크 등을 통합하여 하나의 시스템으로 관리/운영할 수 있는 유기적인 시스템을 의미한다.

https://needjarvis.tistory.com/506

기업내 어플리케이션 통합을 위한, EAI

 

ESB (Enterprise Service Bus)

EAI 이후에 나온 개념으로 EAI가 허브&스포크 형태의 중앙 집중 방식이라면 ESB는 동적인 업무 프로세스를 통합하기 위한 버스 형태를 취하고 있다. 즉, EAI는 시스템 사이에 위치하여 각 시스템의 연계를 중심으로 한다면, ESB는 서비스를 중심으로 하나의 업무 프로세스를 진행하기 위해 하나 이상의 시스템을 거치는 운반자적인 역할을 중심으로 한다. 

https://needjarvis.tistory.com/506

기업내 어플리케이션 통합을 위한, EAI

 

데이터 레이크 (Data Lake)

가공되지 않은 상태로 저장되어 접근이 가능한 엄청난 양의 데이터를 의미한다. 이 때 데이터는 일반적인 정형 데이터 뿐만 아니라 이미지, 동영상, 센서 데이터, 소설 데이터 등의 비정형 데이터도 포함될 수 있다. 데이터 웨어하우스는 정해진 목적에 따라 선가공되어 저장되고 관리되지만 데이터 레이크는 특별한 목적이 없이 저장하기 때문에 이를 알아볼 수 있는 메타데이터와 고유 식별자 태그를 함께 사용된다. 

https://blog.naver.com/pentamkt/222263253172

[하루 3분 IT] 데이터 레이크(Data Lake)

 

데이터 가상화 (Data Virtualization)

분산되어 있는 데이터베이스, 파일, 빅데이터를 물리적인 데이터 이동 없이 가상 데이터 레이어로 통합하고 활용하는 개념으로 구체적으로는 인메모리에 가상의 DB를 만들어 데이터 접근 및 통합을 가능하게 해주는 방식이다. 비슷한 개념인 데이터 레이크의 경우 모아둔 데이터의 활용이 어렵다는 점과 다양한 원천 데이터 소스의 최신 데이터 재결합 등에 따라 동기화 이슈가 발생한다는 점 등의 한계점이 들어나며 데이터 가상화 기술이 급부상하고 있다. 

http://m.ddaily.co.kr/m/m_article/?no=189021 

급부상하는 데이터 가상화, 주목받는 이유는?

 

온프레미스 (On-Premise)

기업의 서버를 클라우드 같은 원격 환경에서 운영하는 방식이 아닌 자체적으로 전산실 서버에 직접 설치해 운영하는 방식을 의미한다.

https://m.blog.naver.com/PostView.naver?isHttpsRedirect=true&blogId=dktmrorl&logNo=221745088983 

[IT정보] 온프레미스(On-premise) 개념

 

데이터 카탈로그 (Data Catalog)

조직 내에서 구성된 데이터 자산 인벤토리로 메타 데이터를 사용하여 조직의 데이터 관리 작업을 지원한다. 즉, 조직의 모든 데이터 자산에 대한 정보를 담고 있기 때문에 데이터 웨어하우스나 데이터 레이크에 저장된 데이터를 사용자 목적에 따라 적합한 데이터를 찾고 활용할 수 있도록 도와준다. 

https://blog.naver.com/bigbase1/222489025374

데이터 웨어하우스와 데이터 레이크(DATA LAKE), 데이터 카탈로그란?

 

데이터 이행 (데이터 마이그레이션)

대량의 데이터를 한 위치에서 다른 위치로 옮기는 프로세스를 의미한다. 일반적으로 데이터 마이그레이션은 데이터에 대한 새로운 시스템을 도입한 결과로 발생하게 된다. 

https://www.netapp.com/ko/knowledge-center/what-is-data-migration/

데이터 마이그레이션이란? | NetApp