Snowflake veri kümelerinin veri kalitesi

Snowflake veri kümelerinizdeki anlamsal türlerin keşfi ve veri kalitesi okumalarından faydalanmak için veri ürünleri bağlamında veri bağlantılarınızla önemli bir ön koşul ayarlamanız gerekir.

Snowflake bağlantı ayarları

Snowflake'ten veri kümeleri oluşturmanız ve daha sonra veri kümesine genel bakış ve veri ürününe genel bakış kısmında şemalarına ve kalitesine erişime sahip olmak için aynı bağlantıyı hem Qlik Talend Data Integration hub'ında hem de Qlik Analytics Services hub'ında oluşturmanız gerekir.

Bir Snowflake veritabanında saklanan verileri getirmek istediğinizi varsayalım, bu verileri Kataloğunuza veri kümesi olarak ekleyin ve bir analiz uygulaması için kullanacağınız bir veri ürününde gruplayın.

1. Qlik Talend Data Integration'da Yeni ekle'ye ve ardından Veri bağlantısı'na tıklayın.

2. WRITE izinlerine ve içe aktarmak istediğiniz tablolara erişimi olan bir kullanıcının giriş bilgilerini kullanarak Snowflake veritabanına erişiminizi yapılandırın.

3. Qlik Analiz Hizmetleri'nde Yeni ekle'ye ve ardından Veri bağlantısı'na tıklayın.

4. Aynı Snowflake veritabanına erişiminizi, mümkünse aynı kullanıcının veya tablolarda en azından READ izinlerine sahip olan bir kullanıcının giriş bilgilerini kullanarak daha önce olduğu gibi yapılandırın.

5. Rol alanında, Snowflake veritabanında oluşturulan mevcut bir role karşılık gelen ve bu nesneler üzerinde aşağıdaki ayrıcalıklara sahip olan bir rol girmeniz gerekir.

   • WAREHOUSE üzerinde USAGE

   • DATABASE üzerinde USAGE

   • SCHEMA üzerinde USAGE

   • SCHEMA üzerinde CREATE TABLE

   • SCHEMA üzerinde CREATE FUNCTION

   • SCHEMA üzerinde CREATE VIEW

   • TABLE üzerinde SELECT

6. Qlik Talend Data Integration ana sayfasına dönüp Yeni ekle'ye ve ardından Veri projesi oluştur'a tıklayın.

7. Projeniz için kaynak olarak 2. adımdaki Snowflake bağlantınızı kullanın ve işlem hattınızı oluşturmaya başlayın. Daha fazla bilgi için bk. Bir veri işlem hattı oluşturma.

8. İşlem hattınızda herhangi bir noktada bir veri görevini seçin, Ayarlar'a ve ardından Katalog sekmesine giderek Katalogda Yayınla onay kutusunu seçin.

   Bu, veri kümesi hazırlanıp çalıştırıldığında veri kümesinin bu sürümünün Katalogda yayınlanacağı anlamına gelir. Bu seçeneği proje düzeyinde işaretlemek de mümkündür.

9. Veri projenizi çalıştırın.

Veri projenizi çalıştırdıktan sonra yeni veri kümesi Kataloğa eklenir ve kalite göstergelerine ve içerikleriyle ilgili daha fazla ayrıntıya erişebilirsiniz. Bu yapılandırma, Snowflake veri kümelerini analiz uygulamaları için kaynak olarak kullanmayı da mümkün kılar.

Veri projenizi oluşturmadan önce gerektiği kadar veri kümesi ekleyebilirsiniz. Kataloğa hem Qlik Talend Data Integration hub'ından hem de Qlik Analytics Services hub'ından erişilebildiğinden, veri kümelerinizi tercih ettiğiniz konumda açabilirsiniz ve bağlama bağlı olarak doğru bağlantı kullanılacaktır.

Göndermede kalite hesaplaması

Veri kümenizin Genel Bakış bölümünde Hesapla veya Yenile düğmesinin kullanılması, veritabanının 1.000 satırlık bir örneği üzerinde kalite hesaplamasını tetikler. Bu işlem, Snowflake tarafında, göndermede gerçekleşir.

Ardından 100 satırlık bir örnek, Qlik Cloud'a gönderilir ve burada, güncel anlamsal türler ile geçerlilik ve eksiksizlik istatistikleri ile önizleme olarak görüntüleyebilirsiniz. Bu örnek daha sonra MongoDB'de saklanır.

Aşağıdaki diyagram, veri kalitesi işleme faaliyetini özetler.