Qlik Talend Cloud Başlangıç Kılavuzu aboneliği ile veri çoğaltma
Görev kurulumu sihirbazını kullanarak sadece birkaç tıklamayla kolayca çoğaltma görevi ayarlayabilirsiniz.
Sihirbazda gösterilen ayarlar, seçilen hedef türünü yansıtır. Örneğin, Amazon S3 gibi depolama hedeflerine çoğaltma yaparken sizden bir depolama konumu istenecektir. Ancak Amazon Redshift gibi bir hazırlama alanı gerektiren hedeflere çoğaltma yaparken bir hazırlama alanını tanımlamanız veya seçmeniz istenecektir.
Aşağıdaki tablo, amaçlanan hedef için bu konuya göz atmanıza yardımcı olacaktır.
Hazırlama olmadan veritabanlarına ve veri depolarına çoğaltma yapma
Aşağıdaki şekilde, hazırlama alanı gerektirmeyen veritabanlarına veya veri depolarına çoğaltma görevi ayarlayın:
- Google BigQuery
- Snowflake
Hazırlama ile veri depolarına çoğaltma yapma
Aşağıdaki şekilde, hazırlama alanı gerektiren veri depolarına çoğaltma görevi ayarlayın:
- Amazon Redshift
- Microsoft Fabric
- Databricks
Bulut depolama alanına çoğaltma
Bulut depolama alanına çoğaltma görevi ayarlayın.
Hazırlama olmadan veritabanlarına ve veri depolarına çoğaltma yapma
Bu bölümde, ayrı bir hazırlama alanı gerektirmeyen veritabanlarına ve veri depolarına nasıl çoğaltma görevi ayarlayacağınız açıklanmaktadır.
Bunu yapmak için:
-
Veri Entegrasyonu > Ana Sayfa bölümünde Verileri çoğalt seçeneğine tıklayın.
Veri çoğaltma sihirbazı açılır.
-
Genel sekmesinde aşağıdakileri yapın:
-
Görev adı
Göreviniz için bir ad belirtin.
-
Açıklama
İsteğe bağlı olarak göreviniz için bir açıklama girin.
-
Proje
Şunlardan birini yapın:
- Mevcut bir projeyi seçin
-
Yeni bir proje için bir ad belirtin ve ardından Proje alanının altında Yeni proje ekle: <your-project-name> seçeneğine tıklayın.
Proje adı Proje alanına eklenecektir.
-
Alan
Çoğaltma projeniz için bir veri alanı seçin. Herhangi bir veri alanı oluşturmadıysanız aşağıdakilerden birini yapın:
-
Data-Space (varsayılan kiracı veri alanı) seçeneğini belirleyin
Bilgi notuData-Space tüm üyeler için izinlerin tamamına sahiptir. Her bir üyenin sahip olduğu rolleri ve izinleri Veri alanı rolleri ve izinleri bölümünde açıklanan şekilde daha sonra düzenleyebilirsiniz. -
Sihirbazı iptal edin, Veri alanı oluşturma bölümünde açıklandığı gibi kendi veri alanınızı oluşturun ve ardından sihirbazı tekrar çalıştırın.
Veri alanları hakkında daha fazla bilgi için bkz. Qlik Talend Data Integration içindeki boşluklarda çalışma.
-
-
-
İleri'ye tıklayın. Kaynak bağlantı seç sekmesinde, kaynak verilere bir bağlantı seçin. İsteğe bağlı olarak Eylemler sütunundaki menüden Düzenle'yi seçerek bağlantı ayarlarını düzenleyebilirsiniz.
Kaynak verilerle henüz bir veri bağlantı oluşturmadıysanız sekmenin sağ üst köşesindeki Bağlantı oluştur seçeneğine tıklayarak bir bağlantı oluşturmanız gerekir.
Sol taraftaki filtreleri kullanarak bağlantı listesini filtreleyebilirsiniz. Bağlantılar kaynak türüne, ağ geçidine, alana ve sahibine göre filtrelenebilir. Bağlantılar listesinin üzerindeki Tüm filtreler düğmesi geçerli filtrelerin sayısını gösterir. Soldaki Filtreler panelini kapatmak veya açmak için bu düğmeyi kullanabilirsiniz. Şu anda etkin olan filtreler de mevcut bağlantılar listesinin üzerinde gösterilir.
Ayrıca, sağdaki açılır listeden Son değiştirilme, Son oluşturulma veya Alfabetik'i seçerek listeyi sıralayabilirsiniz. Sıralama düzenini değiştirmek için listenin sağındaki oka tıklayın.
Bir veri kaynağı bağlantısı seçtikten sonra, isteğe bağlı olarak sekmenin (önerilir) sağ üst kısmındaki Bağlantıyı test et seçeneğine ve ardından İleri seçeneğine tıklayın.
-
Veri kümelerini seç sekmesinde, çoğaltma görevine dahil edilecek tabloları ve/veya görünümleri seçin. Ayrıca joker karakterler kullanabilir ve Veritabanından veri seçme bölümünde açıklandığı gibi seçim kuralları oluşturabilirsiniz.
-
Hedef bağlantı seç sekmesinde, kullanılabilir bağlantılar listesinden hedefini seçin ve ardından İleri'ye tıklayın. İşlevsellik açısından bu sekme, daha önce açıklanan Kaynak bağlantı seç sekmesiyle aynıdır.
-
Ayarlar sekmesinde, isteğe bağlı olarak aşağıdaki ayarları değiştirin ve ardından İleri'ye tıklayın.
Çoğaltma modu
Bilgi notuSaaS uygulama kaynaklarından çoğaltma yaparken, Tam yük çoğaltma modu varsayılan olarak etkindir ve devre dışı bırakılamaz.- Tam yük: Verileri seçilen kaynak tablolardan hedef platforma yükler ve gerekirse hedef tabloları oluşturur. Tam yük, görev başlatıldığında otomatik olarak gerçekleşir ancak ihtiyaç duyulması halinde manuel olarak da gerçekleştirilebilir.
-
Değişiklikleri uygula: Hedef tabloları, kaynak tablolarda yapılan değişikliklerle güncel tutar.
-
Değişiklikleri sakla: Kaynak tablolardaki değişiklikleri Değişiklik Tablolarında saklar (kaynak tablo başına bir tane).
Daha fazla bilgi için bk. Değişiklikleri sakla.
Değişiklik verisi yakalama sıklığı, zamanlayıcı ayarlarına göre belirlenir. Varsayılan değişiklik yakalama aralığı altı saatte birdir. Daha fazla bilgi için bk. Veri Hareketi ağ geçidi olmadan çalışırken görevleri zamanlama.
Özel şemalar
- Hedef veri kümesi şeması: İsteğe bağlı olarak, veri kümelerinin hedefte oluşturulmasını istediğiniz şemayı seçin.
- Kontrol tablosu şeması: İsteğe bağlı olarak, kontrol tablolarının hedefte oluşturulmasını istediğiniz şemayı seçin.
Çoğaltma zamanlayıcısı
-
Verileri çoğaltma sıklığı: Veri kaynağından değişikliklerin hangi sıklıkla yakalanacağını planlayabilir ve Başlangıç saati ve Başlangıç tarihi ayarlayabilirsiniz. Kaynak veri kümeleri CDC'yi (Değişiklik verisi yakalama) destekliyorsa yalnızca kaynak verilerindeki değişiklikler çoğaltılacak ve ilgili hedef tablolara uygulanacaktır. Kaynak veri kümeleri CDC'yi (Değişiklik verisi yakalama) desteklemiyorsa değişiklikler tüm kaynak verilerinin ilgili hedef tablolara yüklenerek uygulanacaktır. Kaynak veri kümelerinden bazıları CDC'yi destekliyor, bazıları desteklemiyorsa iki ayrı alt görev oluşturulacaktır (Değişiklikleri uygula olduğu veya Değişiklikleri sakla çoğaltma seçeneklerinin seçildiği varsayılır): Biri, CDC'yi desteklemeyen veri kümelerini yeniden yüklemek, diğeri CDC'yi desteklemeyen veri kümelerindeki değişiklikleri yakalamak içindir.
Görev kurulumu sihirbazı, saatlik bir aralık zamanlamanıza olanak tanır. Görev kurulumunu tamamladığınızda Veri Hareketi ağ geçidi olmadan çalışırken görevleri zamanlama bölümünde açıklandığı gibi farklı zamanlama seçeneklerini keşfedebilirsiniz.
Veri kaynağı türü ve abonelik kademesine göre minimum zamanlama aralıkları hakkında bilgi için bkz. İzin verilen minimum zamanlama aralıkları.
Ayarları daha sonra, Veri çoğaltma görevi ayarları bölümünde açıklandığı gibi değiştirebilirsiniz.
-
Özet sekmesinde, veri hattının bir görseli görüntülenir. Aşağıdaki İşlem hattı oluşturulduktan sonra eylemlerinden birini seçin:
- <name> projesini aç (varsayılan)
-
<name> veri görevini aç
Bilgi notuSeçilen veri kümelerinin bazıları CDC'yi desteklemiyorsa iki işlem hattı görüntülenecektir: biri CDC görevi, diğeri Yeniden yükleme görevi için.
Ardından Oluştur ve çalıştır (varsayılan) veya görevi çalıştırmadan oluşturmak için Oluştur seçeneğine tıklayın.
Oluştur ve çalıştır seçeneğine tıkladıysanız görevi oluşturulacak ve çalışmaya başlayacaktır (bu işlem birkaç dakika sürebilir).
-
Oluştur seçeneğine tıkladıysanız daha önce seçtiğinizİşlem hattı oluşturulduktan sonra eylemine bağlı olarak aşağıdakilerden biri gerçekleşecektir:
- Proje açılarak yeni oluşturulan görevi gösterecektir.
-
Görevi, Veri kümeleri hub'ında açılacaktır. Veri Kümeleri sekmesi seçilen kaynak tablolarının yapısını ve meta verilerini gösterir. Bu, açıkça listelenen tüm tabloların yanı sıra seçim kurallarıyla eşleşen tabloları da içerir.
Veri kaynağından daha fazla tablo eklemek isterseniz, Kaynak verilerini seç'e tıklayın.
-
Veri setlerinde dönüştürmeler gerçekleştirebilir, verileri filtreleyebilir veya sütunlar ekleyebilirsiniz.
Daha fazla bilgi için bk. Veri kümelerini yönetme.
-
İstediğiniz dönüşümleri eklediğinizde Veri kümelerini doğrula'ya tıklayarak veri kümelerini doğrulayabilirsiniz. Doğrulama başarısız olursa devam etmeden önce hataları giderin.
Daha fazla bilgi için bk. Veri kümelerini doğrulama ve ayarlama.
-
Hazır olduğunuzda veri görevini hazırlayıp çalıştırmak için Hazırla ve çalıştır seçeneğine tıklayın.
Görevlerin kurtarılması ve diğer görev çalıştırma yöntemleri hakkında bilgi için bk. Gelişmiş çalıştırma seçenekleri.
-
Artık çoğaltma görevi başlayacaktır. İlerlemeyi İzle'de görebilirsiniz. Daha fazla bilgi için bk. Ayrı bir veri görevini izleme
Hazırlama ile veri depolarına çoğaltma yapma
Bu bölümde, ayrı bir hazırlama alanı gerektiren veri depolarına nasıl çoğaltma görevi ayarlayacağınız açıklanmaktadır.
Bunu yapmak için:
-
Veri Entegrasyonu> Ana Sayfa bölümünde Verileri çoğalt seçeneğine tıklayın.
Veri çoğaltma sihirbazı açılır.
-
Genel sekmesinde aşağıdakileri yapın:
-
Görev adı
Göreviniz için bir ad belirtin.
-
Açıklama
İsteğe bağlı olarak göreviniz için bir açıklama girin.
-
Proje
Şunlardan birini yapın:
- Mevcut bir projeyi seçin
-
Yeni bir proje için bir ad belirtin ve ardından Proje alanının altında Yeni proje ekle: <your-project-name> seçeneğine tıklayın.
Proje adı Proje alanına eklenecektir.
-
Alan
Çoğaltma projeniz için bir veri alanı seçin. Herhangi bir veri alanı oluşturmadıysanız aşağıdakilerden birini yapın:
-
Data-Space (varsayılan kiracı veri alanı) seçeneğini belirleyin
Bilgi notuData-Space tüm üyeler için izinlerin tamamına sahiptir. Her bir üyenin sahip olduğu rolleri ve izinleri Veri alanı rolleri ve izinleri bölümünde açıklanan şekilde daha sonra düzenleyebilirsiniz. -
Sihirbazı iptal edin, Veri alanı oluşturma bölümünde açıklandığı gibi kendi veri alanınızı oluşturun ve sihirbazı tekrar çalıştırın.
Veri alanları hakkında daha fazla bilgi için bkz. Qlik Talend Data Integration içindeki boşluklarda çalışma.
-
-
-
İleri'ye tıklayın. Kaynak bağlantı seç sekmesinde, kaynak verilere bir bağlantı seçin. İsteğe bağlı olarak Eylemler sütunundaki menüden Düzenle'yi seçerek bağlantı ayarlarını düzenleyebilirsiniz.
Kaynak verilerle henüz bir veri bağlantı oluşturmadıysanız sekmenin sağ üst köşesindeki Bağlantı oluştur seçeneğine tıklayarak bir bağlantı oluşturmanız gerekir.
Sol taraftaki filtreleri kullanarak bağlantı listesini filtreleyebilirsiniz. Bağlantılar kaynak türüne, ağ geçidine, alana ve sahibine göre filtrelenebilir. Bağlantılar listesinin üzerindeki Tüm filtreler düğmesi geçerli filtrelerin sayısını gösterir. Soldaki Filtreler panelini kapatmak veya açmak için bu düğmeyi kullanabilirsiniz. Şu anda etkin olan filtreler de mevcut bağlantılar listesinin üzerinde gösterilir.
Ayrıca, sağdaki açılır listeden Son değiştirilme, Son oluşturulma veya Alfabetik'i seçerek listeyi sıralayabilirsiniz. Sıralama düzenini değiştirmek için listenin sağındaki oka tıklayın.
Bir veri kaynağı bağlantısı seçtikten sonra, isteğe bağlı olarak sekmenin (önerilir) sağ üst kısmındaki Bağlantıyı test et seçeneğine ve ardından İleri seçeneğine tıklayın.
-
Veri kümelerini seç sekmesinde, çoğaltma görevine dahil edilecek tabloları ve/veya görünümleri seçin. Ayrıca joker karakterler kullanabilir ve Veritabanından veri seçme bölümünde açıklandığı gibi seçim kuralları oluşturabilirsiniz.
-
Hedef bağlantı seç sekmesinde, kullanılabilir bağlantılar listesinden hedefini seçin ve ardından İleri'ye tıklayın. İşlevsellik açısından bu sekme, daha önce açıklanan Kaynak bağlantı seç sekmesiyle aynıdır.
-
Ayarlar sekmesinde, isteğe bağlı olarak aşağıdaki ayarları değiştirin ve ardından İleri'ye tıklayın.
Çoğaltma modu
Bilgi notuSaaS uygulama kaynaklarından çoğaltma yaparken, Tam yük çoğaltma modu varsayılan olarak etkindir ve devre dışı bırakılamaz.- Tam yük: Verileri seçilen kaynak tablolardan hedef platforma yükler ve gerekirse hedef tabloları oluşturur. Tam yük, görev başlatıldığında otomatik olarak gerçekleşir ancak ihtiyaç duyulması halinde manuel olarak da gerçekleştirilebilir.
-
Değişiklikleri uygula: Hedef tabloları, kaynak tablolarda yapılan değişikliklerle güncel tutar.
-
Değişiklikleri sakla: Kaynak tablolardaki değişiklikleri Değişiklik Tablolarında saklar (kaynak tablo başına bir tane).
Daha fazla bilgi için bk. Değişiklikleri sakla.
Değişiklik verisi yakalama sıklığı, zamanlayıcı ayarlarına göre belirlenir. Varsayılan değişiklik yakalama aralığı altı saatte birdir. Daha fazla bilgi için bk. Veri Hareketi ağ geçidi olmadan çalışırken görevleri zamanlama.
Hazırlama alanına bağlantı
Aşağıda listelenen veri deposuna çoğaltma yaparken bir hazırlama alanı ayarlamanız gerekir. Veriler, depoya aktarılmadan önce hazırlama alanında işlenir ve hazırlanır.
Mevcut bir hazırlama alanını seçin veya yeni bir hazırlama alanı tanımlamak için Yeni oluştur'a tıklayın ve Bulut depolamasına bağlanma bölümündeki talimatları takip edin.
Bağlantı ayarlarını düzenlemek için Düzenle'ye tıklayın. Bağlantıyı test etmek için (önerilir) Test bağlantısı'na tıklayın.
Hangi veri depolarıyla hangi hazırlama alanlarının desteklendiği hakkında bilgi almak için Hedef platform kullanım durumları ve desteklenen sürümler içindeki Hazırlama alanı olarak desteklenir sütununa bakın.
Özel şemalar
- Hedef veri kümesi şeması: İsteğe bağlı olarak, veri kümelerinin hedefte oluşturulmasını istediğiniz şemayı seçin.
- Kontrol tablosu şeması: İsteğe bağlı olarak, kontrol tablolarının hedefte oluşturulmasını istediğiniz şemayı seçin.
Çoğaltma zamanlayıcısı
-
Verileri çoğaltma sıklığı: Veri kaynağından değişikliklerin hangi sıklıkla yakalanacağını planlayabilir ve Başlangıç saati ve Başlangıç tarihi ayarlayabilirsiniz. Kaynak veri kümeleri CDC'yi (Değişiklik verisi yakalama) destekliyorsa yalnızca kaynak verilerindeki değişiklikler çoğaltılacak ve ilgili hedef tablolara uygulanacaktır. Kaynak veri kümeleri CDC'yi (Değişiklik verisi yakalama) desteklemiyorsa değişiklikler tüm kaynak verilerinin ilgili hedef tablolara yüklenerek uygulanacaktır. Kaynak veri kümelerinden bazıları CDC'yi destekliyor, bazıları desteklemiyorsa iki ayrı alt görev oluşturulacaktır (Değişiklikleri uygula olduğu veya Değişiklikleri sakla çoğaltma seçeneklerinin seçildiği varsayılır): Biri, CDC'yi desteklemeyen veri kümelerini yeniden yüklemek, diğeri CDC'yi desteklemeyen veri kümelerindeki değişiklikleri yakalamak içindir.
Görev kurulumu sihirbazı, saatlik bir aralık zamanlamanıza olanak tanır. Görev kurulumunu tamamladığınızda Veri Hareketi ağ geçidi olmadan çalışırken görevleri zamanlama bölümünde açıklandığı gibi farklı zamanlama seçeneklerini keşfedebilirsiniz.
Ayarları daha sonra, Veri çoğaltma görevi ayarları bölümünde açıklandığı gibi değiştirebilirsiniz.
-
Özet sekmesinde, veri hattının bir görseli görüntülenir. Aşağıdaki İşlem hattı oluşturulduktan sonra eylemlerinden birini seçin:
- <name> projesini aç (varsayılan)
-
<name> veri görevini aç
Bilgi notuSeçilen veri kümelerinin bazıları CDC'yi desteklemiyorsa iki işlem hattı görüntülenecektir: biri CDC görevi, diğeri Yeniden yükleme görevi için.
Ardından Oluştur ve çalıştır (varsayılan) veya görevi çalıştırmadan oluşturmak için Oluştur seçeneğine tıklayın.
Oluştur ve çalıştır seçeneğine tıkladıysanız görevi oluşturulacak ve çalışmaya başlayacaktır (bu işlem birkaç dakika sürebilir).
-
Oluştur seçeneğine tıkladıysanız daha önce seçtiğinizİşlem hattı oluşturulduktan sonra eylemine bağlı olarak aşağıdakilerden biri gerçekleşecektir:
- Proje açılarak yeni oluşturulan görevi gösterecektir.
-
Görevi, Veri kümeleri hub'ında açılacaktır. Veri Kümeleri sekmesi seçilen kaynak tablolarının yapısını ve meta verilerini gösterir. Bu, açıkça listelenen tüm tabloların yanı sıra seçim kurallarıyla eşleşen tabloları da içerir.
Veri kaynağından daha fazla tablo eklemek isterseniz, Kaynak verilerini seç'e tıklayın.
-
Veri setlerinde dönüştürmeler gerçekleştirebilir, verileri filtreleyebilir veya sütunlar ekleyebilirsiniz.
Daha fazla bilgi için bk. Veri kümelerini yönetme.
-
İstediğiniz dönüşümleri eklediğinizde Veri kümelerini doğrula'ya tıklayarak veri kümelerini doğrulayabilirsiniz. Doğrulama başarısız olursa devam etmeden önce hataları giderin.
Daha fazla bilgi için bk. Veri kümelerini doğrulama ve ayarlama.
-
Hazır olduğunuzda veri görevini hazırlayıp çalıştırmak için Hazırla ve çalıştır seçeneğine tıklayın.
Görevlerin kurtarılması ve diğer görev çalıştırma yöntemleri hakkında bilgi için bk. Gelişmiş çalıştırma seçenekleri.
-
Artık çoğaltma görevi başlayacaktır. İlerlemeyi İzle'de görebilirsiniz. Daha fazla bilgi için bk. Ayrı bir veri görevini izleme
Bulut depolama alanına çoğaltma
Bu bölümde, bulut depolama alanına nasıl çoğaltma görevi ayarlayacağınız açıklanmaktadır.
Bunu yapmak için:
-
Veri Entegrasyonu> Ana Sayfa bölümünde Verileri çoğalt seçeneğine tıklayın.
Veri çoğaltma sihirbazı açılır.
-
Genel sekmesinde aşağıdakileri yapın:
-
Görev adı
Göreviniz için bir ad belirtin.
-
Açıklama
İsteğe bağlı olarak göreviniz için bir açıklama girin.
-
Proje
Şunlardan birini yapın:
- Mevcut bir projeyi seçin
-
Yeni bir proje için bir ad belirtin ve ardından Proje alanının altında Yeni proje ekle: <your-project-name> seçeneğine tıklayın.
Proje adı Proje alanına eklenecektir.
-
Alan
Çoğaltma projeniz için bir veri alanı seçin. Herhangi bir veri alanı oluşturmadıysanız aşağıdakilerden birini yapın:
-
Data-Space (varsayılan kiracı veri alanı) seçeneğini belirleyin
Bilgi notuData-Space tüm üyeler için izinlerin tamamına sahiptir. Her bir üyenin sahip olduğu rolleri ve izinleri Veri alanı rolleri ve izinleri bölümünde açıklanan şekilde daha sonra düzenleyebilirsiniz. -
Sihirbazı iptal edin, Veri alanı oluşturma bölümünde açıklandığı gibi kendi veri alanınızı oluşturun ve sihirbazı tekrar çalıştırın.
Veri alanları hakkında daha fazla bilgi için bkz. Qlik Talend Data Integration içindeki boşluklarda çalışma.
-
-
-
İleri'ye tıklayın. Kaynak bağlantı seç sekmesinde, kaynak verilere bir bağlantı seçin. İsteğe bağlı olarak Eylemler sütunundaki menüden Düzenle'yi seçerek bağlantı ayarlarını düzenleyebilirsiniz.
Kaynak verilerle henüz bir veri bağlantı oluşturmadıysanız sekmenin sağ üst köşesindeki Bağlantı oluştur seçeneğine tıklayarak bir bağlantı oluşturmanız gerekir.
Sol taraftaki filtreleri kullanarak bağlantı listesini filtreleyebilirsiniz. Bağlantılar kaynak türüne, ağ geçidine, alana ve sahibine göre filtrelenebilir. Bağlantılar listesinin üzerindeki Tüm filtreler düğmesi geçerli filtrelerin sayısını gösterir. Soldaki Filtreler panelini kapatmak veya açmak için bu düğmeyi kullanabilirsiniz. Şu anda etkin olan filtreler de mevcut bağlantılar listesinin üzerinde gösterilir.
Ayrıca, sağdaki açılır listeden Son değiştirilme, Son oluşturulma veya Alfabetik'i seçerek listeyi sıralayabilirsiniz. Sıralama düzenini değiştirmek için listenin sağındaki oka tıklayın.
Bir veri kaynağı bağlantısı seçtikten sonra, isteğe bağlı olarak sekmenin (önerilir) sağ üst kısmındaki Bağlantıyı test et seçeneğine ve ardından İleri seçeneğine tıklayın.
-
Veri kümelerini seç sekmesinde, çoğaltma görevine dahil edilecek tabloları ve/veya görünümleri seçin. Ayrıca joker karakterler kullanabilir ve Veritabanından veri seçme bölümünde açıklandığı gibi seçim kuralları oluşturabilirsiniz.
-
Hedef bağlantı seç sekmesinde, kullanılabilir bağlantılar listesinden hedefini seçin ve ardından İleri'ye tıklayın. İşlevsellik açısından bu sekme, daha önce açıklanan Kaynak bağlantı seç sekmesiyle aynıdır.
-
Ayarlar sekmesinde, isteğe bağlı olarak aşağıdaki ayarları değiştirin ve ardından İleri'ye tıklayın.
Güncelleme yöntemi
-
Değişiklik verisi yakalama (CDC): Veri gölü yerleştirme görevleri tam yükleme ile başlar (bu sırada seçilen tüm tablolar yerleştirilir). Veri gölü yerleştirme görevleri tam yükleme ile başlar (bu sırada seçilen tüm tablolar yerleştirilir).
Bilgi notuDDL işlemlerinin CDC'si (Değişiklik Verisi Yakalama) desteklenmez.Değişiklik verisi yakalama sıklığı, zamanlayıcı ayarlarına göre belirlenir. Varsayılan değişiklik yakalama aralığı altı saatte birdir. Daha fazla bilgi için bk. Veri Hareketi ağ geçidi olmadan çalışırken görevleri zamanlama.
- Yeniden yükle: Seçilen kaynak tablolardan hedef platforma verilerin tam yüklemesini gerçekleştirir ve gerekirse hedef tabloları oluşturur. Tam yük, görev başlatıldığında otomatik olarak gerçekleşir ancak manuel olarak da gerçekleştirilebilir veya gerektiğinde periyodik olarak gerçekleşecek şekilde zamanlanabilir.
Değişiklik verisi yakalama (CDC) seçeneğini belirlerseniz ve verileriniz CDC'yi desteklemeyen tablolar veya görünümler içeriyorsa iki veri işlem hattı oluşturulacaktır. CDC'yi destekleyen tüm tabloları içeren bir işlem hattı ve Yeniden yükle seçeneğini kullanan diğer tüm tablolar ve görünümlerin bulunduğu başka bir işlem hattı.
Kullanılacak klasör
Dosyaların hangi demet klasörüne yazılmasını istediğinize göre aşağıdakilerden birini seçin:
- Varsayılan klasör: Varsayılan klasör biçimi <proje-adınız>/<görev-adınız> şeklindedir
- Kök klasör: Dosyalar doğrudan demetyazılacaktır.
-
Klasör: Klasör adını girin. Klasör mevcut değilse veri gölü yerleştirme görevi sırasında oluşturulacaktır.
Bilgi notu Klasör adı özel karakterler içeremez (örneğin, @, #, !, vb.).
Çoğaltma zamanlayıcısı
-
Verileri çoğaltma sıklığı: Veri kaynağından değişikliklerin hangi sıklıkla yakalanacağını planlayabilir ve Başlangıç saati ve Başlangıç tarihi ayarlayabilirsiniz. Kaynak veri kümeleri CDC'yi (Değişiklik verisi yakalama) destekliyorsa yalnızca kaynak verilerindeki değişiklikler çoğaltılacak ve ilgili hedef tablolara uygulanacaktır. Kaynak veri kümeleri CDC'yi (Değişiklik verisi yakalama) desteklemiyorsa değişiklikler tüm kaynak verilerinin ilgili hedef tablolara yüklenerek uygulanacaktır. Kaynak veri kümelerinden bazıları CDC'yi destekliyor, bazıları desteklemiyorsa iki ayrı alt görev oluşturulacaktır ( Değişiklik verisi yakalama (CDC) güncelleme yönteminin seçildiği varsayılır): Biri, CDC'yi desteklemeyen veri kümelerini yeniden yüklemek, diğeri CDC'yi desteklemeyen veri kümelerindeki değişiklikleri yakalamak içindir.
Görev kurulumu sihirbazı, saatlik bir aralık zamanlamanıza olanak tanır. Görev kurulumunu tamamladığınızda Veri Hareketi ağ geçidi olmadan çalışırken görevleri zamanlama bölümünde açıklandığı gibi farklı zamanlama seçeneklerini keşfedebilirsiniz.
Görev ayarlarını daha sonra, Bulut depolama alanı hedefleriyle ilgili ayarlar bölümünde açıklandığı gibi değiştirebilirsiniz.
-
-
Özet sekmesinde, veri hattının bir görseli görüntülenir. Aşağıdaki İşlem hattı oluşturulduktan sonra eylemlerinden birini seçin:
- <name> projesini aç (varsayılan)
-
<name> veri görevini aç
Bilgi notuSeçilen veri kümelerinin bazıları CDC'yi desteklemiyorsa iki işlem hattı görüntülenecektir: biri CDC görevi, diğeri Yeniden yükleme görevi için.
Ardından Oluştur ve çalıştır (varsayılan) veya görevi çalıştırmadan oluşturmak için Oluştur seçeneğine tıklayın.
Oluştur ve çalıştır seçeneğine tıkladıysanız görevi oluşturulacak ve çalışmaya başlayacaktır (bu işlem birkaç dakika sürebilir).
-
Oluştur seçeneğine tıkladıysanız daha önce seçtiğinizİşlem hattı oluşturulduktan sonra eylemine bağlı olarak aşağıdakilerden biri gerçekleşecektir:
- Proje açılarak yeni oluşturulan görevi gösterecektir.
-
Görevi, Veri kümeleri hub'ında açılacaktır. Veri Kümeleri sekmesi seçilen kaynak tablolarının yapısını ve meta verilerini gösterir. Bu, açıkça listelenen tüm tabloların yanı sıra seçim kurallarıyla eşleşen tabloları da içerir.
Veri kaynağından daha fazla tablo eklemek isterseniz, Kaynak verilerini seç'e tıklayın.
-
Veri setlerinde dönüştürmeler gerçekleştirebilir, verileri filtreleyebilir veya sütunlar ekleyebilirsiniz.
Daha fazla bilgi için bk. Veri kümelerini yönetme.
-
İstediğiniz dönüşümleri eklediğinizde Veri kümelerini doğrula'ya tıklayarak veri kümelerini doğrulayabilirsiniz. Doğrulama başarısız olursa devam etmeden önce hataları giderin.
Daha fazla bilgi için bk. Veri kümelerini doğrulama ve ayarlama.
-
Hazır olduğunuzda veri görevini hazırlayıp çalıştırmak için Hazırla ve çalıştır seçeneğine tıklayın.
Görevlerin kurtarılması ve diğer görev çalıştırma yöntemleri hakkında bilgi için bk. Gelişmiş çalıştırma seçenekleri.
-
Artık çoğaltma görevi başlayacaktır. İlerlemeyi İzle'de görebilirsiniz. Daha fazla bilgi için bk. Ayrı bir veri görevini izleme
Veri setleri için yükleme önceliği ayarlama
Her bir veri setine bir yükleme önceliği atayarak veri görevinizde veri setlerinin yükleme sırasını kontrol edebilirsiniz. Bu, örneğin büyük veri setlerinden önce daha küçük veri setlerini yüklemek isterseniz faydalı olabilir.
-
Yükleme önceliği'ne tıklayın.
-
Her bir veri seti için bir yükleme önceliği seçin.
Varsayılan yükleme önceliği Normal'dir. Veri setleri aşağıdaki öncelik sırasında göre yüklenecektir:
-
En yüksek
-
Daha yüksek
-
Yüksek
-
Normal
-
Düşük
-
Daha düşük
-
En düşük
Aynı önceliğe sahip veri setleri belirli bir sıra olmadan yüklenir.
-
-
OK düğmesine tıklayın.
Meta veriler yenileniyor
Görevin Tasarım görünümündeki kaynağın meta verilerindeki değişikliklerle hizalanması için görevdeki meta verileri yenileyebilirsiniz. Metadata manager'ın kullanıldığı SaaS uygulamalarında, veri görevinde meta verileri yenileyebilmeniz için önce Metadata manager'ın yenilenmesi gerekir.
-
Seçenekleriniz:
-
Görevdeki tüm veri kümelerinin meta verilerini yenilemek için ... ve ardından Meta verileri yenile seçeneğine tıklayın.
-
Tek bir veri kümesindeki meta verilerini yenilemek için Veri kümeleri bölümündeki bir veri kümesinde ... ve ardından Meta verileri yenile seçeneğine tıklayın.
Ekranın alt kısmındaki Meta verileri yenile seçeneğinin altında meta verilerin yenilenme durumunu görüntüleyebilirsiniz. İmleci üzerine getirerek meta verilerin en son yenilendiği zamanı görebilirsiniz.
-
-
Değişiklikleri uygulamak için veri görevini hazırlayın.
Veri görevini hazırladığınızda ve değişiklikler uygulandığında değişiklikler Meta verileri yenile kısmından kaldırılır.
Değişiklikleri çoğaltmak için bu görevi kullanan depolama görevlerini hazırlamanız gerekir.
Bir sütun kaldırılırsa depolamanın geçmiş verileri kaybetmemesi için Null değerleri içeren bir dönüşüm eklenir.
Meta verileri yenileme ile ilgili sınırlamalar
-
Bundan önce aynı zaman aralığında kullanımdan kaldırılmış bir sütunla yeniden adlandırma, aynı veri türüne ve veri uzunluğuna sahipse kullanımdan kaldırılan sütun yeniden adlandırmasına dönüştürülür.
Örnek:
Önce: a b c d
Sonra: a c1 d
Bu örnekte b kullanımdan kaldırılmış ve c, c1 olarak yeniden adlandırılmış ve b ile c aynı veri türüne ve veri uzunluğuna sahiptir.
Bu, b'nin c1 olarak yeniden adlandırılması ve c'nin kullanımdan kaldırılması olarak tanımlanacaktır.
-
Son sütun kullanımdan kaldırılsa ve ondan önceki yeniden adlandırılsa bile son sütun yeniden adlandırması algılanmaz.
Örnek:
Önce: a b c d
Sonra: a b c1
Bu örnekte d kullanımdan kaldırılmış ve c, c1 olarak yeniden adlandırılmıştır.
Bu, c ve d'nin kullanımdan kaldırılması ve c1'in eklenmesi olarak tanımlanacaktır.
-
Sona yeni sütunların ekleneceği varsayılır. Sütunlar sonraki sütun olarak aynı veri türüyle ortaya eklenirse kullanımdan kaldırma ve yeniden adlandırma olarak yorumlanabilirler.
Verileri çoğaltırken sınırlamalar ve dikkate alınacak noktalar
Dönüşümler aşağıdaki sınırlamalara tabidir:
- Dönüşümler, sağdan sola dillerin bulunduğu sütunlar için desteklenmez.
-
Dönüşümler, adında özel karakterler (ör. #, \, /, -) bulunan sütunlarda gerçekleştirilemez.
- LOB/CLOB veri türleri için desteklenen tek dönüşüm, hedefteki sütunu kullanımdan kaldırmaktır.
- Bir sütunu yeniden adlandırmak ve ardından aynı ada sahip yeni bir sütun eklemek için dönüşüm kullanılması desteklenmemektedir.
İster doğrudan ister dönüşüm kuralı kullanarak olsun, null değer alabilme özelliğini değiştirme işlemi, taşınan sütunlarda desteklenmez. Ancak görevde oluşturulan yeni sütunlar varsayılan olarak null değer atanabilir niteliktedir.