Meta veri dosyası açıklaması
Hedef klasörde meta veri dosyaları oluştur seçeneği belirlendiğinde, veri gölü yerleştirme görevi her CSV/JSON/Parquet dosyası için belirtilen hedef klasör altında karşılık gelen bir meta veri dosyası oluşturur.
Meta veri dosyası, özel toplu işlemlerin daha iyi doğrulama yapmasını sağlamak, daha derin otomasyonu desteklemek, köken bilgisi sunmak ve işleme güvenilirliğini artırmak gibi çeşitli avantajlar sunar.
Meta veri dosyaları aşağıdaki tablolarda açıklanmıştır.
Tüm zaman damgaları ISO-8601 formatındadır, örneğin 2016-08-02T10:05:04.802.
| Alan | Açıklama |
|---|---|
|
ad |
Veri gölü yerleştirme görevinin adı. |
|
sourceEndpoint |
Kaynak uç nokta ayarlarında tanımlanan ad. |
|
sourceEndpointType |
Kaynak bağlayıcı türü (ör. Oracle, MySQL vb.). |
|
sourceEndpointUser |
Kaynak uç nokta ayarlarında tanımlanan kullanıcı. |
|
replicationServer |
Veri Hareketi ağ geçidi öğesinin yüklü olduğu makinenin ana bilgisayar adı. |
|
işlem |
Bir hedef veri dosyası oluşturulmuşsa bu alan aşağıdaki değeri içerecektir: dataProduced |
| Alan | Açıklama |
|---|---|
|
ad |
Veri dosyasının uzantısız adı. |
|
uzantı |
Veri dosyasının uzantısı (.csv veya.json seçilen hedef dosya formatına göre). |
|
konum |
Veri dosyasının konumu. |
|
startWriteTimestamp |
Dosyaya yazmanın ne zaman başladığını gösteren UTC zaman damgası. |
|
endWriteTimestamp |
Dosyaya yazmanın ne zaman sona erdiğini gösteren UTC zaman damgası. |
|
firstTransactionTimestamp |
Dosyadaki ilk kaydın UTC zaman damgası. |
|
lastTransactionTimestamp |
Dosyadaki son kaydın UTC zaman damgası. |
|
içerik |
Değerler, ilgili CSV dosyasındaki verilere göre data (Tam Yük yerleştirme için) veya changes (CDC yerleştirme için) olabilir. |
|
recordCount |
Dosyadaki kayıt sayısı. |
|
errorCount |
Dosya oluşturma sırasında karşılaşılan veri hatalarının sayısı. |
| Alan | Açıklama |
|---|---|
|
biçim |
Seçilen hedef dosya formatına göre delimited veya json . |
|
seçenekler |
delimited dosya biçimi için seçenekler. Bu seçenekler ilgili olmadıkları için json formatı için gösterilmeyecektir. |
|
recordDelimiter |
Hedef dosyalardaki kayıtları (satırları) ayırmak için kullanılan sınırlayıcı. Varsayılan değer satırsonudur (\n). |
|
fieldDelimiter |
Hedef dosyalardaki alanları (sütunları) ayırmak için kullanılan sınırlayıcı. Varsayılan değer virgüldür. |
|
nullValue |
Hedef dosyada boş bir değeri belirtmek için kullanılan dize. |
|
quoteChar |
Bir sütunun başında ve sonunda kullanılan karakter. Varsayılan değer çift tırnak karakteridir ("). |
|
escapeChar |
Hem dize hem de dizeyi içeren sütun çift tırnak içine alındığında bir dizeden kaçmak için kullanılan karakter. Dizenin tırnak işaretlerinin öncelenmediği sürece kaldırılacağını unutmayın. Örnek (burada " tırnak karakteri ve \ kaçış karakteridir): 1955, "eski, \"nadir\", Chevrolet",$1000 |
| Alan | Açıklama |
|---|---|
|
customInfo |
Bu bölüm, dfmCustomProperties dahili parametresi kullanılarak ayarlanan tüm özel parametreleri içerir. dfmCustomProperties dahili parametresi aşağıdaki formatta belirtilmelidir: Parameter1=Value1;Parameter2=Value2;Parameter3=Value3 Örnek: Color=Blue;Size=Large;Season=Spring Dahili parametrelerin nasıl ayarlanacağına ilişkin bir açıklama için bk. Amazon S3. |
| Alan | Açıklama |
|---|---|
|
sourceSchema |
Kaynak tabloyu içeren şema. |
|
sourceTable |
Kaynak tablonun adı. |
|
targetSchema |
Hedef tablo şemasının adı (kaynak şema adı değiştirilmişse). |
|
targetTable |
Hedef tablonun adı (kaynak tablo adı değiştirilmişse). |
|
tableVersion |
Veri gölü yerleştirme görevi tabloya dahili bir sürüm numarası atar. Kaynak tabloda bir DDL değişikliği meydana geldiğinde sürüm numarası artar. |
|
sütunlar |
Tablo sütunları hakkında bilgi. |
|
sıralı |
Sütunun kayıttaki konumu (1, 2, 3 vb.). |
|
ad |
Sütun adı. |
|
type |
Sütun veri türü. Daha fazla bilgi için bk. Supported data types. |
|
genişlik |
Sütun için izin verilen maksimum veri boyutu (bayt cinsinden). |
|
ölçek |
Bir sayı için izin verilen ondalık noktanın sağındaki maksimum basamak sayısı. |
|
primaryKeyPos |
Sütunun tablonun Birincil Anahtarındaki veya Benzersiz Dizinindeki konumu. Sütun tablonun Birincil Anahtarının bir parçası değilse değer sıfırdır. |