Hinzufügen von Facetten
Discovery organisiert und klassifiziert Dokumente mit ähnlichen Mustern oder ähnlichem Inhalt, um Sie bei der Analyse der Ergebnisse der linguistischen Verarbeitung und Textanalyse zu unterstützen.
Facetten helfen Ihnen, Dokumente zu filtern, damit Sie schneller eine Tiefenanalyse durchführen können. Ganz gleich, ob Sie versuchen, die sprichwörtliche Nadel im Heuhaufen zu finden oder unerwartete Trends zu entdecken, mit Facetten zu beginnen, kann den Forschungsprozess beschleunigen.
-
Bei Content Mining-Projekten werden Facetten aus Ihrer Sammlung extrahiert, die auf den Informationen zu den Sprachteilen basieren (diese werden durch die Sprachteilanreicherung erfasst, die standardmäßig auf Projekte dieses Typs angewendet wird). Sie können auch Facetten anzeigen, die von Metadaten in Ihren Dokumenten abgeleitet sind.
caption-side=bottom"
-
Bei Document Retrieval-Projekten werden Facetten aus Ihrer Sammlung extrahiert, die auf erkannten Entitäten basieren (die von der Entities-Anreicherung erfasst werden, die standardmäßig auf Projekte dieses Typs angewendet wird).
Top Entities facet
Weitere Informationen über die Entities und Part of Speech Anreicherungen finden Sie unter Anwendung vorgefertigter Anreicherungen. Weitere Informationen über die Anreicherungen, die standardmäßig auf Projekte angewendet werden, finden Sie unter Standardeinstellungen für Projekte.
Erstellen von Facetten
Weitere Informationen über das Hinzufügen von Facetten zu einem Content-Mining-Projekt finden Sie unter Facetten hinzufügen.
Für andere Projekttypen können Sie Facetten auf die folgenden Arten erstellen:
- Aus vorhandenen Feldern in einer Sammlung
- Durch Hinzufügen eines Wörterbucheintrags
- IBM CloudDurch Erkennung eines Musters
Facette aus vorhandenen Feldern in Sammlung erstellen
Wenn Sie Anreicherungen auf eine Sammlung anwenden, werden dem Index neue Felder hinzugefügt. Informationen, die durch die Anreicherung erkannt werden, werden in diesen neuen Feldern gespeichert. Sie können die Anreicherungsfelder als Quelle für Facetten verwenden.
Wenn Sie z. B. das vorgefertigte Enrichment Schlüsselwörter anwenden, können Sie eine Facette auf der Grundlage der Schlüsselwörter erstellen, die in Ihrer Sammlung vorkommen. Bei der Verarbeitung Ihres Dokuments erkennt die Schlüsselwortanreicherung
alle vorkommenden Schlüsselwort-Erwähnungen und speichert Informationen darüber in einer Reihe von Feldern, die mit dem Präfix enriched_{field_name}.keywords beginnen. Um eine Schlüsselwort-Facette zu erstellen, fügen Sie eine
Facette hinzu, die ihre Kategorien aus dem Feld bezieht, in dem die Schlüsselwort-Erwähnungen gespeichert sind, dem enriched_{field_name}.keywords.mentions.text-Feld. Weitere Informationen über die Anreicherung von Schlüsselwörtern
finden Sie unter Anwendung vorgefertigter Anreicherungen.
In ähnlicher Weise können Sie die Felder, die durch domänenspezifische Anreicherungen erzeugt werden, als Quelle für die Facette verwenden. Wenn Sie eine Regulärer Ausdruck Anreicherung erstellen, können Sie eine Facette definieren, mit der Sie alle erkannten Ausdruckserwähnungen kategorisieren können. Weitere Informationen finden Sie unter Hinzufügen von domänenspezifischen Ressourcen.
Um eine Facette aus vorhandenen Feldern hinzuzufügen, führen Sie die folgenden Schritte aus:
-
Klicken Sie auf der Seite "Verbessern und anpassen" auf "Anzeige anpassen " und dann auf "Facetten ".
-
Klicken Sie auf Neue Facette > Aus vorhandenen Feldern in einer Sammlung.
-
Wählen Sie das Feld, das Sie für Ihre Facette verwenden möchten, z. B.
enriched_text.entities.type. Fügen Sie die Facettenbeschriftung hinzu und wählen Sie eine Filtersteuerungsoption. -
Optional: Sie können die maximale Anzahl der Facettenwerte, die angezeigt werden, einstellen.
Die maximale Anzahl ist die Summe der Anzahl der Facettenwerte, die für jeden Facettentyp angezeigt werden. Standardmäßig werden insgesamt 10 Facettenwerte angezeigt.
-
Wenn Sie die Facette testen, können Sie die Optionen anpassen.
Wörterverzeichnis für die Erstellung einer Facette erstellen
Fügen Sie eine Facette hinzu, um eine Gruppe von Begriffen zu gruppieren, die für Ihren Anwendungsfall eine besondere Bedeutung haben, indem Sie ein Wörterbuch erstellen.
Ein Beispiel: Der Inhaber eines Bekleidungsgeschäfts sammelt Kundenrezensionen und möchte in der Lage sein, wiederkehrende Beschwerden zu finden, um Einzelhandelsartikel zu identifizieren, die eingestellt werden sollen. Der Besitzer kann ein Wörterbuch erstellen, um die Erwähnung bestimmter Kleidungsstücke im Rezensionstext zu erkennen und zu kennzeichnen. Um das Ziel zu unterstützen, das Kundenfeedback nach Bekleidungsartikeln zu filtern, könnte der Eigentümer Einträge ähnlich den in der folgenden Tabelle aufgeführten hinzufügen.
| Wörterbucheintrag | Synonyme | Name im Wörterbuch |
|---|---|---|
| Hemd | Oberteil,Button-down,Tunika,Bluse,T-Shirt,Langarm,Kurzarm,Tank | Kleider |
| Pants | Slacks, Jeans, Leggings, Sweatshirts, Caprihosen, Culottes, Hosen, Chinos | Kleider |
Eine Bewertung mit dem Inhalt This long-sleeve is so badly proportioned. Who has arms that long! wird zurückgegeben, wenn Sie die Dokumente nach der Facette clothing filtern.
Um eine Facette durch Erstellen eines Wörterbuchs zu erstellen, führen Sie die folgenden Schritte aus:
-
Klicken Sie auf der Seite "Verbessern und anpassen" auf "Anzeige anpassen " und dann auf "Facetten ".
-
Klicken Sie auf Neue Facette > Durch Erstellen eines Wörterverzeichnisses.
-
Geben Sie einen Namen für die Facette ein, und erstellen Sie dann ein Wörterbuch mit den Begriffen, die Sie kategorisieren möchten.
Nachdem Sie das Wörterverzeichnis gespeichert haben, wird der Name, den Sie für den Facettenkennsatz verwendet haben, in der Liste der Facetten angezeigt.
-
Wenn Sie die Facette testen, können Sie weitere Begriffe zu dem von Ihnen erstellten Wörterverzeichnis hinzufügen, indem Sie Domänenkonzepte vermitteln > Wörterverzeichnisse auswählen.
Das von Ihnen erstellte Wörterbuch wird in der Liste auf der Seite "Wörterbücher" angezeigt. Weitere Informationen finden Sie unter Wörterbücher.
Erstellen einer Facette durch Identifizieren eines Musters
Patterns ist eine Beta-Funktion und unterstützt nur englischsprachige Dokumente.
IBM Cloud IBM Cloud nur
Diese Facette ist nur für verwaltete Bereitstellungen und in Document Retrieval und Conversational Search Projekten verfügbar.
Von der Funktion 'Muster' wird eine Musterinduktion verwendet, mit der Discovery die Muster in Ihren Daten vermittelt werden sollen. Die Musterinduktion erzeugt Extraktionsmuster aus von Ihnen bereitgestellten Beispielen. Nachdem Sie einige Beispiele angegeben haben, schlägt Discovery weitere Regeln vor, die Sie überprüfen müssen, um das Muster zu vervollständigen.
Die Mustererkennung funktioniert in Texten mit konsistenter Struktur in Bezug auf Groß-/Kleinschreibung, Länge, Text oder numerische Werte am besten. Beispiele für Muster, die Sie Discovery zum Ermitteln in Ihren Dokumenten vermitteln können:
- Alle Nummern des
ISO-Standards, zum BeispielISO 45001oderISO 22000 - Alle Währungsbeträge, z. B.
$50.5 million,29 dollars,$29.00 - Alle Daten, zum Beispiel
8 September 2019,June 12, 2020
Wenn Sie bestimmte Begriffe oder Texte identifizieren müssen, erstellen Sie stattdessen eine Facette als Teil eines Wörterbucheintrags. Verwenden Sie zum Beispiel eine Wörterbuchfacette, um die folgenden Arten von Informationen zu gruppieren:
- Alle Produkte in derselben Familie:
Cloud Pak for Data,Cloud Pak for Automation,Cloud Pak for Security - Alle Begriffe in derselben Kategorie:
carburetor,piston,valves
Weitere Informationen finden Sie unter Erstellen einer Facette durch Erstellen eines Wörterbuchs.
Um eine Facette durch Identifizierung eines Musters hinzuzufügen, führen Sie die folgenden Schritte aus:
-
Klicken Sie auf der Seite "Verbessern und anpassen" auf "Anzeige anpassen " und dann auf "Facetten ".
-
Klicken Sie auf Neue Facette > Durch Angeben eines Musters.
-
Wählen Sie auf der Seite "Facette aus einem neuen Muster erstellen " aus, wie Sie Dokumente auswählen möchten. Sie können Discovery 10 zufällige Dokumente für Sie auswählen lassen oder Sie können bis zu 20 Dokumente selbst auswählen.
Wenn Sie die Dokumente selbst auswählen, beachten Sie die folgenden Hinweise:
-
Wählen Sie Dokumente aus, die Erwähnungen des Musters in allen verschiedenen Formaten enthalten, die das Modell später erkennen soll.
-
Wenn Sie möchten, dass das Modell auch Verwendungsweisen eines Begriffs versteht, die nicht in das Muster passen, fügen Sie ein Dokument ein, in dem der Begriff in der falschen Weise verwendet wird, damit Sie seine Auswahl absichtlich auslassen können.
Das Muster, das Sie hinzufügen möchten, könnte zum Beispiel Erwähnungen von Kleidung enthalten. In Dokumenten, in denen ein
topals Hinweis auf ein Hemd erwähnt wird, würden Sietopals Hinweis auf Kleidung auswählen. Sie könnten aber auch ein Dokument einfügen, in demthe top 3 fashion trendserwähnt wird, und absichtlich nichttopauswählen, wenn der Begriff in diesem Zusammenhang verwendet wird. Die Auslassung lehrt das Modell, dass top nicht in das Muster passt, wenn der Begriff für das Beste verwendet wird. -
Nehmen Sie Dokumente auf, die maximal 5.000 Zeichen umfassen. Jedes Dokument, das die Grenze überschreitet, wird auf 5.000 Zeichen gekürzt.
-
-
Klicken Sie auf Weiter.
-
Wählen Sie Beispielwörter oder -sätze aus, die zu dem Muster passen, das Sie definieren möchten.
Wenn Sie z. B. ein Datumsmuster definieren möchten, beginnen Sie damit, Datumsangaben in jedem Dokument hervorzuheben. Wenn Sie einen Fehler machen, bewegen Sie den Mauszeiger über die Auswahl und klicken zum Löschen auf die Option
x.Achten Sie darauf, dass Sie jede Erwähnung des Musters auswählen. Das Modell lernt aus dem, was Sie weglassen, genauso viel wie aus dem, was Sie auswählen.
-
Fahren Sie mit dem Auswählen der Beispiele fort. Wenn Sie genügend Beispiele gefunden haben, zeigt Discovery eine Liste mit vorgeschlagenen Beispielen, die Sie überprüfen können. Wählen Sie Ja oder Nein für jede einzelne.
Klicken Sie auf das Symbol Vorschaudokument, wenn Sie das Beispiel im Kontext bestätigen möchten.
-
Fahren Sie mit der Markierung von Beispielen und der Überprüfung von Vorschlägen fort, bis eine Meldung angezeigt wird, die besagt, dass Sie genügend Beispiele angegeben haben.
-
Klicken Sie auf die Registerkarte Beispiele prüfen, um die Listen der Beispiele zu prüfen.
-
Klicken Sie auf Muster speichern, wenn die Beispiele korrekt sind.
Wenn das System kein gültiges Muster ermitteln kann, ist die Schaltfläche "Muster speichern" nie aktiviert. Das System kann kein gültiges Muster ermitteln, wenn Sie widersprüchliche Beispiele zur Illustration des Musters wählen. Wenn Sie Ihre Arbeit nicht speichern können, klicken Sie auf die Schaltfläche Zurücksetzen, um neu zu beginnen. Die Dokumente werden in ihren ursprünglichen Zustand zurückversetzt, und alle Beispiele, die zuvor identifiziert wurden, werden nicht mehr ausgewählt.
Nachdem Sie das Muster gespeichert haben, wird der Name, den Sie für die Facettenbezeichnung angegeben haben, in der Liste der Facetten angezeigt.
Wann sollte eine Musterfacette anstelle eines Feldes mit regulärem Ausdruck verwendet werden?
Die Erstellung einer musterbasierten Facette ist vergleichbar mit der Erstellung eines Musters aus einem Feld, das durch Anwendung der Regelmäßigen Anreicherung auf eine Sammlung abgeleitet wird.
- Wenn die Informationen, die Sie erfassen möchten, strengen Formatierungsregeln folgen, können Sie die Regelmäßige Ausdrücke verwenden, um sie zu finden. Wenden Sie die Anreicherung an, dann können Sie das resultierende Feld als Quelle für die Facette verwenden.
- Wenn die Informationen, die Sie erfassen möchten, in verschiedenen Formatierungsstilen auftreten können, ist die Musterfacette die bessere Wahl. So können beispielsweise Datumsangaben oder Währungen auf unterschiedliche Weise formatiert werden. Keine einzige Regex-Regel kann alle Varianten erfassen. Mit der Facette "Muster" können Sie mehrere Beispiele aus der Praxis anführen, die zeigen, wie die Informationen auf unterschiedliche Weise angegeben werden können.