Verwalten von semantischen Typen

Der semantische Typ eines Feldes entspricht dem Datentyp, der darin vorkommt, z. B. Namen, Postleitzahlen oder Telefonnummern.

Semantische Typen helfen Ihnen, die Datenqualität Ihrer Datensätze zu verbessern. Je gültiger Ihre Daten für den zugewiesenen semantischen Typ sind, desto besser ist die Qualität.

Jedem Feld der Datensätze wird automatisch ein semantischer Typ zugewiesen. Einige semantische Typen sind vordefiniert und standardmäßig verfügbar. Weitere Informationen finden Sie unter Vordefinierte semantische Typen.

Wenn die vordefinierten Typen Ihren Anforderungen nicht genügen, können Sie Ihre eigenen semantischen Typen erstellen:

• Wörterbuch: Die Daten müssen mit den Werten aus dem Wörterbuch übereinstimmen. Weitere Informationen finden Sie unter Erstellen eines wörterbuchbasierten semantischen Typs.
• Muster: Die Daten müssen mit einem regulären Ausdruck übereinstimmen. Weitere Informationen finden Sie unter Erstellen eines musterbasierten semantischen Typs.
• Verbund: Die Daten müssen mit den Werten aus verschiedenen semantischen Typen übereinstimmen, die den semantischen Verbundtyp bilden. Weitere Informationen finden Sie unter Erstellen eines semantischen Verbundtyps.

Um die Datenqualität Ihrer Datensätze zu verbessern, können die semantischen Typen in die Berechnung der Datenqualität einbezogen werden. Weitere Informationen finden Sie unter Verwenden der semantischen Typen zur Validierung.

Erkennung der semantischen Typen

Die Datenerkennung berechnet, wie viele Werte in einer Spalte mit jedem semantischen Typ übereinstimmen, und wenn das Ergebnis größer als 40 % ist, weist sie den semantischen Typ zur Spalte zu.

Die Punktzahl wird im rechten Fenster angezeigt, wenn Sie einen semantischen Typ zuweisen. Weitere Informationen finden Sie unter Zuweisen eines anderen semantischen Typs.

Wie wird der Prozentsatz berechnet?

Dieser Prozentsatz ist die Summe zweier Prozentsätze:

• Ein Prozentsatz stellt die Anzahl der Werte dar, die dem semantischen Typ entsprechen; bis zu 100 % werden zugewiesen. Bei der Bestimmung, ob ein Wert mit einem semantischen Typ übereinstimmt, stützt sich die Datenerkennung auf den Typ des semantischen Typs:

  • Wörterbuch: Stimmt der Wert mit einem Wert aus dem Wörterbuch überein? Satzzeichen, Groß- und Kleinschreibung, Leerzeichen und Akzente werden ignoriert.

  • Muster: Stimmt der Wert mit dem regulären Ausdruck überein? Die Groß- und Kleinschreibung wird ignoriert, Akzente jedoch nicht.

  • Verbund: Wird der Wert in mindestens einem untergeordneten Element erkannt?

    Ein Verbundtyp ist eine Gruppe vorhandener semantischer Typen, die als untergeordnete Typen bezeichnet werden.

  Wenn die Antwort positiv ist, wird der Wert als gültig betrachtet.

• Der andere Prozentsatz stellt die Ähnlichkeit zwischen dem Feldnamen und dem Namen des semantischen Typs dar; bis zu 10 % werden zugewiesen.

  Zum Vergleichen der Namen:

  • Der Levenshtein-Algorithmus wird verwendet. Er berechnet die Mindestanzahl Bearbeitungen (Einfügung, Löschung oder Ersetzung), die zum Umwandeln einer Zeichenfolge in eine andere erforderlich sind.

  • Die Groß- und Kleinschreibung und Akzente werden ignoriert.

  • Wenn die Zeichenfolgen Leerzeichen enthalten, wird die Wortreihenfolge ignoriert. Beispielsweise werden „US Phone“ und „Phone US“ als identisch betrachtet.

  Der maximale Prozentsatz ist 100 %. Wenn alle Werte einem semantischen Typ entsprechen und der Feldname mit dem Namen des semantischen Typs identisch ist, beträgt das Ergebnis immer noch 100 %.

Erkennung von Datentypen

Anstelle von semantischen Typen können auch native Datentypen zugewiesen werden. Wenn kein semantischer Typ mehr als 40 % erhält, weist die Datenerkennung automatisch einen Datentyp zu.

Um zu bestimmen, von welchem Typ ein Wert ist, befolgt die Datenerkennung eine Reihenfolge:

1. Ist der Wert leer?

2. Ist der Wert vom Typ „Boolesch“? „Wahr“ und „falsch“ sind die einzigen Werte, die als Typ „Boolesch“ gelten.

3. Ist der Wert vom Typ „Ganzzahl“?

4. Ist der Wert vom Typ „Dezimalzahl“?

5. Ist der Wert vom Typ „Datum“?

6. Wenn der Wert nicht von einem der obigen Typen ist, wird er als Textwert betrachtet.

Da die Verifizierung inkrementell ist, hat ein Wert nur einen Typ. Beispielsweise ist der Wert 5 vom Typ „Ganzzahl“. Er wird nicht als Typ „Text“ betrachtet.

Bewerten der Werte

Sie können den Prozentsatz der ungültigen, leeren und gültigen Werte in der Qualitätsleiste für jedes Feld anzeigen. Der Prozentsatz wird für alle Daten des Feldes berechnet, nicht nur für die Stichprobe.

1. Öffnen Sie den Datensatz.
2. Wählen Sie die Registerkarte Datenvorschau aus.
3. Um den Prozentsatz anzuzeigen, bewegen Sie den Mauszeiger über eine Farbe in der Qualitätsleiste.
   Sie können bis zu drei Farben von links nach rechts sehen:
   • Rot: ungültige Werte. Dies beinhaltet nicht ausführbare Werte aus Regeln.
   • Schwarz: leere oder Null-Werte.
   • Grün: gültige Werte. Dies beinhaltet nicht anwendbare Werte aus Regeln.
   
4. Um weitere Details zu jeder Farbe anzuzeigen, klicken Sie darauf. Das rechte Fenster öffnet sich und Sie können den semantischen Typ und den Prozentsatz für die Validierungsregeln anzeigen.

Die ungültigen Werte sind mit einer roten Leiste auf der linken Seite gekennzeichnet.

Klicken Sie auf den roten Balken, um mehr über den Fehler zu erfahren. Der Fehler kann durch eine Validierungsregel, den semantischen Typ oder beides verursacht werden.

Aktivieren und Deaktivieren eines semantischen Typs

Wenn Sie nicht möchten, dass ein semantischer Typ einem Feld zugewiesen wird, können Sie ihn deaktivieren. Einige semantische Typen sind standardmäßig deaktiviert.

Sie können semantische Typen jederzeit aktivieren und deaktivieren.

1. Bevor Sie einen semantischen Typ deaktivieren, prüfen Sie, ob er in Datensätzen verwendet wird. Weitere Informationen finden Sie unter Wird der semantische Typ verwendet?

   Nachdem Sie den semantischen Typ deaktiviert haben, müssen Sie die Datensätze aktualisieren, in denen er verwendet wurde.

2. Öffnen Sie Datenqualität. Sie befinden sich auf der Registerkarte Semantische Typen.
3. Klicken Sie in der Liste auf den semantischen Typ oder auf .
4. Klicken Sie auf Bearbeiten. Das Fenster Semantischer Typ bearbeiten ist geöffnet.
5. Wählen Sie eine der Optionen:
• Klicken Sie im oberen Teil des Fensters auf Aktivieren.
• Klicken Sie auf Deaktivieren in der unteren linken Ecke des Fensters.

  Der semantische Typ ist deaktiviert und auf der Registerkarte Semantische Typen als solcher gekennzeichnet.

  

  Wenn der semantische Typ in Datensätzen verwendet wird, wird in dem Feld eine Meldung angezeigt.

  

  Weitere Informationen zum Zuweisen eines anderen semantischen Typs finden Sie unter Zuweisen eines anderen semantischen Typs.

Zuweisen eines anderen semantischen Typs

Die semantischen Typen werden den Feldern automatisch zugewiesen, aber Sie können auch einen anderen zuweisen.

1. Öffnen Sie den Datensatz.
2. Wählen Sie die Registerkarte Datenvorschau aus.
3. Klicken Sie auf das Feld, das Sie aktualisieren möchten.
4. Klicken Sie im rechten Fenster im Abschnitt Datentyp auf das Symbol Bearbeiten.

   

5. Suchen Sie nach dem semantischen Typ, den Sie dem Feld zuweisen möchten, und klicken Sie darauf.

   Um Ihnen die Auswahl des besten semantischen Typs für das Feld zu erleichtern, hat jeder semantische Typ eine Punktzahl in Prozent. Sie stellt die Werte der Stichprobe dar, die für den semantischen Typ gültig sind. Wenn Sie die Berechtigung zum Aktualisieren haben, können Sie die Punktzahlen aktualisieren, indem Sie im rechten Fenster auf Aktualisieren klicken.

   Um einen semantischen Typ zu erstellen und ihn automatisch dem Feld zuzuweisen, klicken Sie auf Aus Feld erstellen. Weitere Informationen finden Sie unter Erstellen eines semantischen Typs aus einem Feld.

6. Klicken Sie über dem rechten Fenster auf Aktualisieren, um Ihre Änderungen zu übernehmen.

Erstellen eines wörterbuchbasierten semantischen Typs

Sie können einen semantischen Typ auf der Grundlage eines geschlossenen Wörterbuchs erstellen. Sie definieren jeden Wert, dem Ihre Daten entsprechen müssen.

1. Öffnen Sie Datenqualität. Sie befinden sich auf der Registerkarte Semantische Typen.
2. Wenn Sie keine semantischen Typen haben, klicken Sie auf Hinzufügen. Andernfalls klicken Sie auf Semantischen Typ erstellen.
3. Geben Sie einen Namen ein.
4. Geben Sie eine Beschreibung ein. Dies ist optional, wird aber empfohlen, um den Zweck des semantischen Typs zu beschreiben.
5. Wenn Sie möchten, dass die semantischen Typen in die Qualitätsberechnung einbezogen werden, aktivieren Sie den Schalter Für Validierung verwenden.
6. Wählen Sie Wörterbuch aus.
7. Geben Sie die Werte ein oder importieren Sie eine Textdatei, indem Sie auf klicken.
8. Um den semantischen Typ automatisch zu öffnen, nachdem er erstellt wurde, aktivieren Sie das Kontrollkästchen Semantischen Typ öffnen.
9. Klicken Sie auf Erstellen. Der semantische Typ wird erstellt.
10. Um den neuen semantischen Typ Feldern zuzuweisen, die ihm entsprechen, gehen Sie zu Katalog, öffnen Sie einen Datensatz und klicken Sie auf Berechnen oder Aktualisieren.

Erstellen eines musterbasierten semantischen Typs

Sie können einen semantischen Typ auf der Grundlage eines regulären Ausdrucks erstellen.

1. Öffnen Sie Datenqualität. Sie befinden sich auf der Registerkarte Semantische Typen.
2. Wenn Sie keine semantischen Typen haben, klicken Sie auf Hinzufügen. Andernfalls klicken Sie auf Semantischen Typ erstellen.
3. Geben Sie einen Namen ein.
4. Geben Sie eine Beschreibung ein. Dies ist optional, wird aber empfohlen, um den Zweck des semantischen Typs zu beschreiben.
5. Wenn Sie möchten, dass die semantischen Typen in die Qualitätsberechnung einbezogen werden, aktivieren Sie den Schalter Für Validierung verwenden.
6. Wählen Sie Muster aus.
7. Geben bzw. fügen Sie den regulären Ausdruck ein. Die maximale Länge beträgt 350 Zeichen.

   Aus Sicherheitsgründen können einige reguläre Ausdrücke nicht verwendet werden, insbesondere die Rückreferenzierungen. Weitere Informationen finden Sie in der RE2/J-Dokumentation.

8. Um den semantischen Typ automatisch zu öffnen, nachdem er erstellt wurde, aktivieren Sie das Kontrollkästchen Semantischen Typ öffnen.
9. Klicken Sie auf Erstellen. Der semantische Typ wird erstellt.
10. Um den neuen semantischen Typ Feldern zuzuweisen, die ihm entsprechen, gehen Sie zu Katalog, öffnen Sie einen Datensatz und klicken Sie auf Berechnen oder Aktualisieren.

Erstellen eines semantischen Verbundtyps

Sie können eine Gruppe von semantischen Typen erstellen. Wenn die Datensätze beispielsweise Kunden aus der ganzen Welt enthalten, können Sie einen semantischen Verbundtyp erstellen, um alle semantischen Typen für Postleitzahlen zusammenzufassen.

1. Öffnen Sie Datenqualität. Sie befinden sich auf der Registerkarte Semantische Typen.
2. Wenn Sie keine semantischen Typen haben, klicken Sie auf Hinzufügen. Andernfalls klicken Sie auf Semantischen Typ erstellen.
3. Geben Sie einen Namen ein.
4. Geben Sie eine Beschreibung ein. Dies ist optional, wird aber empfohlen, um den Zweck des semantischen Typs zu beschreiben.
5. Wenn Sie möchten, dass die semantischen Typen in die Qualitätsberechnung einbezogen werden, aktivieren Sie den Schalter Für Validierung verwenden.
6. Wählen Sie Verbund aus.
7. Wählen Sie aus der Dropdown-Liste die semantischen Typen aus, die hinzugefügt werden sollen.

   Wenn Für Validierung verwenden aktiviert ist, können Sie nur semantische Typen auswählen, die auch für die Validierung verwendet werden. Wenn Sie einen semantischen Typ nicht in der Liste finden können, stellen Sie sicher, dass Für Validierung verwenden aktiviert ist.

8. Um den semantischen Typ automatisch zu öffnen, nachdem er erstellt wurde, aktivieren Sie das Kontrollkästchen Semantischen Typ öffnen.
9. Klicken Sie auf Erstellen. Der semantische Typ wird erstellt.
10. Um den neuen semantischen Typ Feldern zuzuweisen, die ihm entsprechen, gehen Sie zu Katalog, öffnen Sie einen Datensatz und klicken Sie auf Berechnen oder Aktualisieren.

Erstellen eines semantischen Typs aus einem Feld

Sie können einen semantischen Typ aus einem Datensatz erstellen. Sie brauchen nicht zur Registerkarte Semantische Typen zu wechseln.

1. Öffnen Sie den Datensatz.
2. Wählen Sie die Registerkarte Datenvorschau aus.
3. Klicken Sie auf das Feld, das Sie aktualisieren möchten.
4. Klicken Sie im rechten Fenster im Abschnitt Datentyp auf das Symbol Bearbeiten.

   

5. Klicken Sie auf Aus Feld erstellen. Das Fenster Semantischen Typ erstellen wird geöffnet. Der Typ Wörterbuch ist bereits ausgewählt.
6. Geben Sie die Werte ein oder importieren Sie eine Textdatei, indem Sie auf klicken.
7. Um den semantischen Typ automatisch zu öffnen, nachdem er erstellt wurde, aktivieren Sie das Kontrollkästchen Semantischen Typ öffnen.
8. Klicken Sie auf Erstellen. Der semantische Typ wurde erstellt. Sie wurden zurück zum Datensatz geführt.
9. Klicken Sie über dem rechten Fenster auf Aktualisieren, um Ihre Änderungen zu übernehmen.

Bearbeiten eines semantischen Typs

Sie können einen semantischen Typ umbenennen und Werte hinzufügen, bearbeiten und entfernen.

Sie können den Typ eines semantischen Typs nicht ändern. Sie müssen einen neuen erstellen.

1. Bevor Sie einen semantischen Typ bearbeiten, prüfen Sie, ob er in Datensätzen verwendet wird. Weitere Informationen finden Sie unter Wird der semantische Typ verwendet?

   Nachdem Sie den semantischen Typ bearbeitet haben, müssen Sie die Datensätze aktualisieren, in denen er verwendet wird.

2. Öffnen Sie Datenqualität. Sie befinden sich auf der Registerkarte Semantische Typen.
3. Klicken Sie in der Liste auf den semantischen Typ oder auf .
4. Klicken Sie auf Bearbeiten. Das Fenster Semantischer Typ bearbeiten ist geöffnet.
5. Bearbeiten Sie den Typ wie erforderlich.
6. Klicken Sie auf Speichern.

Wenn der semantische Typ in Datensätzen verwendet wird, wird über dem Datensatz eine Meldung angezeigt, in der Sie zum Aktualisieren aufgefordert werden.

Löschen eines semantischen Typs

Sie können einen semantischen Typ auch dann löschen, wenn er Feldern in einem oder mehreren Datensätzen zugewiesen ist.

1. Bevor Sie einen semantischen Typ löschen, prüfen Sie, ob er in Datensätzen verwendet wird. Weitere Informationen finden Sie unter Wird der semantische Typ verwendet?

   Nachdem Sie den semantischen Typ gelöscht haben, müssen Sie die Datensätze aktualisieren, in denen er verwendet wurde.

2. Öffnen Sie Datenqualität. Sie befinden sich auf der Registerkarte Semantische Typen.
3. Klicken Sie in der Liste auf den semantischen Typ oder auf .
4. Klicken Sie auf Löschen.
5. Bestätigen Sie das Löschen.

   Wenn der semantische Typ in Datensätzen verwendet wird, wird in dem Feld eine Meldung angezeigt.

   
6. Weitere Informationen zum Zuweisen eines anderen semantischen Typs finden Sie unter Zuweisen eines anderen semantischen Typs.

Verwenden der semantischen Typen zur Validierung

Da die semantischen Typen Teil der Datensatzqualität sind, sind sie auch Teil der Datenqualitätsberechnung, aber Sie können diese Funktion deaktivieren.

1. In Datenqualität erstellen oder aktualisieren Sie einen semantischen Typ.
2. Deaktivieren Sie im Konfigurationsfenster den Schalter Für Validierung verwenden.
3. Klicken Sie auf Speichern.

Das Aktivieren oder Deaktivieren dieses Schalters hat keinen Einfluss auf die Verwendung des semantischen Typs. Wenn einem Feld ein semantischer Typ zugewiesen wird, werden die Werte des Feldes immer anhand des semantischen Typs validiert.

Zum Beispiel sind 89 % der Werte eines Feldes für einen semantischen Typ gültig:

• Wenn der Schalter deaktiviert ist, wirkt sich dieser gute Prozentsatz nicht auf die Datensatzqualität aus.
• Wenn der Schalter aktiviert ist, ist die Datensatzqualität besser.

Vordefinierte semantische Typen

Die vordefinierten semantischen Typen sind in zwei Kategorien unterteilt:

• Datentypen: die Standardtypen (Text, Ganzzahl, usw.).
• Semantische Typen: Gruppen von definierten Werten.

In den folgenden Tabellen sind die einzelnen Datentypen und semantischen Typen aufgeführt und beschrieben.