데이터 통합 프로젝트 설계

Data Integration 공간에서 작업

프로젝트를 만들고 저장하는 데 사용되는 데이터 공간을 만듭니다. 공간 내에서 커넥터를 사용하여 새 연결을 만들고 Data Movement gateway에 대한 액세스를 관리할 수도 있습니다.

데이터 소스에 대한 연결 설정

데이터 소스에 대한 연결을 만듭니다.

대상에 대한 연결 설정

대상 플랫폼과의 연결을 만듭니다.

Qlik Data Gateway - Data Movement

엔터프라이즈 데이터 소스 및 SaaS 응용 프로그램에서 지원되는 대상으로 안전하게 데이터를 이동하려면 Qlik Data Gateway - Data Movement를 설정합니다.

데이터 파이프라인 프로젝트 만들기

데이터 파이프라인 프로젝트는 지원되는 다양한 소스에서 데이터 플랫폼으로의 데이터 수집을 지원합니다. 여기에서 ELT(푸시다운) 변환을 통해 데이터를 변환하여 데이터 레이크하우스 및 데이터웨어하우스 아키텍처를 지원할 수 있습니다. 파이프라인은 로그 기반 CDC 및 증분형 데이터 소스를 지원하지만 주요 데이터웨어하우스 플랫폼으로의 데이터 수집을 위한 다양한 옵션을 제공합니다.

다음과 같은 경우 데이터 파이프라인 프로젝트를 사용합니다.

• 수집 프로세스에서 유형 1 및 유형 2 데이터 구조를 지원합니다.

• 분석 워크로드에 적합한 출력이나 별표 스키마로 데이터를 변환하고 재구성합니다.

• Iceberg를 기반으로 레이크하우스를 만듭니다.

• 조직이나 기능적 경계에 따라 프로젝트 전반에 걸쳐 관리되는 복잡한 파이프라인을 만듭니다.

복제 프로젝트 만들기

복제 프로젝트는 지원되는 다수의 소스에서 데이터 레이크 또는 지원되는 대상 플랫폼으로의 직접 복제를 지원합니다. 데이터는 대상 구조에 직접 적용되지만 복잡한 데이터 변환 또는 재구성은 지원되지 않습니다. 복제 파이프라인은 복제 시나리오에 대해 더 다양한 대상 기술을 지원합니다.

다음과 같은 경우 복제 프로젝트를 사용합니다.

• 대상에 데이터를 복제하므로 해당 데이터에 복잡한 변환이 필요하지 않습니다.

• 데이터 파이프라인에서 지원하지 않는 대상에 데이터를 복제합니다.

버전 제어로 프로젝트 관리

버전 제어를 사용하여 데이터 프로젝트 개발을 관리하고 변경 내용을 추적합니다.