연결 기반 데이터 집합에 대한 데이터 품질 | Qlik Cloud 도움말
기본 콘텐츠로 건너뛰기 보완적인 콘텐츠로 건너뛰기

연결 기반 데이터 집합에 대한 데이터 품질

마지막 업데이트: 2026-11-18

연결 기반 데이터 집합에서 의미 체계 유형 검색과 데이터 품질 판독의 이점을 얻으려면 데이터 제품 컨텍스트에서 데이터 연결을 사용하여 중요한 전제 조건을 설정해야 합니다.

정보 메모다음 구독 중 하나가 필요합니다:
  • Qlik Talend Cloud 엔터프라이즈
  • Qlik Talend Cloud 프리미엄
  • Qlik Cloud Analytics 프리미엄
  • Qlik Cloud Analytics 엔터프라이즈
  • Qlik Sense Enterprise SaaS

지원되는 파일, 연결 및 데이터베이스

다음 파일 형식이 지원됩니다.

  • Excel 파일: XLS/XLSX
  • 구분 기호로 분리된 텍스트 파일: CSV/TXT
  • JSON 파일: JSON
  • XML 파일: XML
  • Qlik 데이터 파일: QVD (QlikView Data)/QVX (QlikView Exchange)
  • Parquet 파일: PARQUET
  • KML 파일: KML(지리 데이터)

클라우드 스토리지에서 데이터 세트를 추가할 때 파일 크기는 1GB를 초과할 수 없습니다.이 클라우드 스토리지 한도는 아래에 설명된 데이터 품질 계산 한도와 별개입니다.

현재 품질 계산에 지원되는 형식은 CSV, TXT, Parquet, QVD, XLS 및 XLSX이며, 다음 제한 사항이 적용됩니다:

  • CSV/TXT 최대 1 GB
  • Parquet 최대 1GB
  • QVD 최대 100 GB
  • XLS/XLSX 최대 100 MB

Parquet 파일의 경우 데이터 품질은 플랫 스키마에 대해서만 지원됩니다.중첩 필드(LIST, MAP, STRUCT)는 지원되지 않습니다.

이러한 제한을 초과하는 파일 기반 데이터 세트에는 데이터 품질이 지원되지 않습니다.Excel 파일에 여러 시트가 있는 경우 품질 계산은 첫 번째 시트에서만 수행됩니다.

  • Snowflake 및 Databricks 데이터 집합의 경우 풀업 및 푸시다운 모드에서 모두 데이터 품질이 지원됩니다.

  • 다음 연결을 기반으로 하는 데이터 집합의 경우 풀업 모드에서 데이터 품질이 지원됩니다.

    • Amazon Athena

    • Amazon Redshift

    • Amazon S3 V2
    • Apache Hive

    • 아파치 피닉스

    • Apache Spark

    • Azure SQL 데이터베이스

    • Azure 저장소
    • Azure Synapse Analytics

    • Cassandra

    • Cloudera Impala

    • Couchbase

    • DynamoDB

    • Dropbox
    • Google BigQuery

    • Google 클라우드 저장소
    • Google 드라이브
    • Marketo

    • Microsoft SQL Server

    • MongoDB

    • MySQL Entreprise 에디션

    • Office 365 Sharepoint
    • OneDrive
    • Oracle

    • PostgreSQL

    • Presto

    • SAP HANA

    • SFTP
    • Snowflake

테이블에서 데이터 세트 생성하기

데이터 집합을 만들 때 데이터 소스에서 데이터베이스를 선택한 다음 해당 데이터베이스에서 테이블을 선택합니다.선택한 각 테이블에 대해 데이터 집합이 만들어집니다.

  1. 카탈로그에서 새로 만들기 > 데이터 세트를 클릭합니다.
  2. 연결을 선택하고 다음을 클릭합니다.
  3. 드롭다운 목록에서 데이터베이스와 스키마를 선택합니다.
  4. 테이블을 선택하고 다음을 클릭합니다.
  5. 공간을 선택하고 데이터 집합 만들기를 클릭합니다.카탈로그로 리디렉션되며 목록에서 새 데이터 세트를 확인할 수 있습니다.

이제 데이터 품질을 계산하고 데이터 세트를 데이터 제품에 추가할 수 있습니다.자세한 내용은 데이터 품질 컴퓨팅 구성을 참조하세요.

파일에서 데이터셋 생성하기

  1. 카탈로그에서 새로 만들기 > 데이터 세트를 클릭합니다.
  2. 연결을 선택하고 다음을 클릭합니다.
  3. 파일을 선택하고 다음을 클릭합니다.
  4. 공간을 선택하고 데이터 집합 만들기를 클릭합니다.카탈로그로 리디렉션되며 목록에서 새 데이터 세트를 확인할 수 있습니다.

이제 데이터 품질을 계산하고 데이터 세트를 데이터 제품에 추가할 수 있습니다.자세한 내용은 데이터 품질 컴퓨팅 구성을 참조하세요.

연결 기반 데이터 집합 만들기

카탈로그에서 연결 기반 데이터 세트를 생성할 수 있지만, 파이프라인 프로젝트를 사용할 수도 있습니다.

파이프라인 프로젝트에서 데이터 세트를 생성하면 데이터 작업을 사용하여 프로젝트 내에서 모든 데이터 통합을 수행할 수 있습니다.자세한 내용은 데이터 파이프라인 프로젝트 만들기를 참조하세요.

카탈로그에서 데이터셋 생성하기

파이프라인 프로젝트를 사용할 필요가 없는 경우, 데이터 세트를 생성하여 데이터 품질을 계산하고 데이터 제품을 통해 해당 데이터 세트를 사용할 수 있습니다.

  1. Qlik Talend Data Integration > 카탈로그에서 새로 만들기 > 데이터 세트를 클릭합니다.
  2. 연결을 선택하고 다음을 클릭합니다.
  3. 데이터 세트를 선택하고 다음을 클릭합니다.

    데이터 세트가 목록에 없는 경우, 지원되는 형식 중 하나가 아님을 의미합니다:

    • Excel 파일:.xls, .xlsx
    • 구분 기호로 분리된 텍스트 파일:.csv, .txt
    • Excel 파일:.xls, .xlsx
    • JSON 파일:.json
    • XML 파일:.xml
    • Qlik 데이터 파일:.qvd (QlikView Data), .qvx (QlikView Exchange)
    • Parquet 파일:.parquet
    • KML 파일:.kml (Geographic data)

    품질 계산의 경우 파일 기반 데이터 세트에 크기 제한이 적용됩니다: CSV, TXT 및 Parquet는 최대 1GB, QVD는 최대 100GB, XLS/XLSX는 최대 100MB입니다.

  4. 공간을 선택하고 데이터 집합 만들기를 클릭합니다.카탈로그로 리디렉션되며 목록에서 새 데이터 세트를 확인할 수 있습니다.

이제 데이터 품질을 계산하고 데이터 세트를 데이터 제품에 추가할 수 있습니다.자세한 내용은 데이터 품질 컴퓨팅 구성을 참조하세요.

파이프라인 프로젝트에서 데이터 세트 생성하기

  1. Qlik Talend Data Integration > 연결에서 연결 만들기를 클릭합니다.

  2. 가져오려는 테이블에 대한 충분한 권한과 액세스 권한이 있는 사용자의 자격 증명을 사용하여 데이터베이스에 대한 액세스를 구성합니다.

  3. Qlik Cloud 분석에서 만들기를 클릭한 다음 데이터 연결을 클릭합니다.

  4. 이상적으로는 동일한 사용자의 자격 증명을 사용하거나 테이블에 대해 최소한 READ 권한이 있는 사용자를 사용하여 이전과 동일한 데이터베이스에 대한 액세스를 구성합니다.

  5. (Snowflake에만 해당) 역할 필드에 Snowflake 데이터베이스에서 만들어진 기존 역할에 해당하고 이러한 개체에 대해 다음과 같은 권한이 있는 역할을 입력해야 합니다.

    • WAREHOUSE에 대한 USAGE

    • DATABASE에 대한 USAGE

    • SCHEMA에 대한 USAGE

    • 스키마에 테이블 생성

    • SCHEMA에 대한 CREATE FUNCTION

    • SCHEMA에 대한 CREATE VIEW

    • 테이블에 대한 SELECT

  6. (Databricks 전용) Databricks에서는 데이터베이스에 다음 권한을 정의해야 합니다:

    • 테이블 만들기

    • 볼륨 생성

    • MODIFY

    • 볼륨 읽기

    • SELECT

    • 스키마 사용

    • 쓰기 볼륨

  7. Qlik Talend Data Integration 홈페이지로 돌아가 새로 만들기를 클릭한 다음 파이프라인 프로젝트를 클릭합니다.

  8. 2단계에서 만든 연결을 프로젝트의 소스로 사용하고 파이프라인 구축을 시작합니다.자세한 내용은 데이터 파이프라인 프로젝트 생성 및 관리을(를) 참조하세요.

  9. 파이프라인의 어느 지점에서나 데이터 작업을 선택하고 설정으로 이동한 다음 카탈로그 탭으로 이동한 다음 카탈로그에 게시 확인란을 선택할 수 있습니다.

    이는 파이프라인 프로젝트가 준비되고 실행될 때 이 버전의 데이터 집합이 카탈로그에 게시된다는 의미입니다.프로젝트 수준에서 이 옵션을 확인할 수도 있습니다.

  10. 데이터 프로젝트를 실행합니다.

파이프라인 프로젝트를 실행한 후 새 데이터 집합이 카탈로그에 추가되고 품질 표시기와 해당 콘텐츠에 대한 자세한 내용에 액세스할 수 있습니다.이 구성을 사용하면 데이터 집합을 분석 애플리케이션의 소스로 사용할 수도 있습니다.

데이터 제품을 구축하기 전에 필요한 만큼 데이터 집합을 추가할 수 있습니다.Qlik Talend Data Integration 허브 및 Qlik Cloud 분석 서비스 허브 모두에서 카탈로그에 액세스할 수 있으므로, 선호하는 위치에서 데이터 세트를 열 수 있으며 컨텍스트에 따라 적절한 연결이 사용됩니다.

풀업/푸시다운에서의 품질 컴퓨팅

데이터 집합의 개요에서 계산 또는 새로 고침 버튼을 사용하면 행 1,000개 샘플에 대한 품질 계산이 시작됩니다.

이 작업은 기본적으로 풀업 모드에서 수행됩니다.Snowflake 및 Databricks 데이터 집합의 경우 이 작업은 데이터베이스 측에서 풀업 모드(기본값) 또는 푸시다운 모드에서 모두 발생할 수 있습니다.

데이터 품질을 계산한 후, 최대 1,000개 행(기본값)의 미리 보기를 검색하여 최신 의미 체계 유형, 타당성 및 완성도 통계와 함께 표시합니다.그런 다음 이 샘플은 MongoDB에 저장됩니다.데이터셋 미리보기 크기(100 또는 1,000개 행)를 구성하려면 테넌트 관리자는 관리 활동 센터의 설정 페이지로 이동해야 합니다. 자세한 내용은 Configuring dataset preview size을(를) 참조하십시오.

정보 메모

푸시다운 모드에서 계산된 Databricks 데이터 세트의 경우, 계산된 샘플이 요청된 것보다 적은 행을 반환하면 미리 보기에 구성된 미리 보기 크기보다 적은 행이 때때로 포함될 수 있습니다.Databricks 무작위 샘플링은 TABLESAMPLE을(를) 사용하며, 이는 대략적인 행 수를 반환합니다.미리 보기는 계산된 샘플의 하위 집합이므로 샘플에서 반환된 행 수를 초과할 수 없습니다.

자세한 내용은 해당 Databricks 설명서를 참조하십시오.

정보 메모열이 500개를 초과하는 데이터 세트의 경우 데이터 품질을 계산할 수 없습니다.

Databricks의 푸시다운 모드 데이터 품질 사전 요구 사항

Databricks에서 푸시다운 모드로 데이터 품질을 계산하려면 Qlik이 시맨틱 유형과 같은 특정 품질 참조 데이터를 Databricks 인스턴스에 동기화해야 합니다.또한 Databricks의 몇 가지 고급 기능을 활용합니다.

이 기능이 올바르게 작동하려면 Databricks 인스턴스에서 다음 사전 요구 사항을 충족해야 합니다:

  • Unity Catalog가 활성화되어 있어야 합니다.

  • Databricks 연결과 관련된 사용자는 테이블 생성, 스키마 생성, 볼륨 생성 및 볼륨 쓰기 권한이 있어야 합니다.

    Qlik은 연결에 지정된 데이터베이스에 qlik_internal이라는 스키마를 생성합니다.이 스키마는 Qlik에 의해 자동으로 제거되지 않습니다.SaaS 클라우드 인프라 사용을 중단하는 경우 수동으로 삭제해야 합니다.

  • 데이터 정렬을 활성화해야 합니다.

제한 사항과 관련하여, 문자열 열의 날짜 인식은 ISO-8601 형식으로 제한된다는 점에 유의하십시오.

이 페이지가 도움이 되었습니까?

이 페이지 또는 해당 콘텐츠에서 오타, 누락된 단계 또는 기술적 오류와 같은 문제를 발견하면 알려 주십시오!