Informationen zur Datenaufnahme

Die Datenaufnahme ist der Prozess des Importierens und Ladens von Daten in IBM® watsonx.data. Über die Benutzeroberfläche (UI) von watsonx.data können Sie das Modul Ingest data von der Seite Data manager verwenden, um Daten sicher und einfach zu laden. Alternativ können Sie auch lokale oder entfernte Datendateien zum Erstellen von Tabellen einlesen, indem Sie die Option Tabelle aus Datei erstellen verwenden.

Wenn Sie eine Datendatei in watsonx.dataaufnehmen, wird das Tabellenschema generiert und abgeleitet, wenn eine Abfrage ausgeführt wird. Die einzulesenden Dateien müssen denselben Formattyp und dasselbe Schema aufweisen. watsonx.data erkennt das Schema automatisch auf der Grundlage der einzulesenden Quelldatei.

Nachfolgend sind einige der Anforderungen oder Verhaltensweisen der Dateneingabe aufgeführt:

• Die Schemaweiterentwicklung wird nicht unterstützt.
• Die Zieltabelle muss eine Tabelle im Eisbergformat sein.
• IBM Storage Ceph, IBM Cloud Object Storage (COS), AWS S3, und MinIO Objektspeicher werden unterstützt.
• Die Eigenschaft pathStyleAccess für Objektspeicher wird nicht unterstützt.
• als Quelldateien werden die Formate.txt,.csv, Parquet, JSON, ORC und Avro. unterstützt.
• Die Höchstgrenze für die kumulative Größe von Dateien muss bei der lokalen Aufnahme innerhalb von 500 MB liegen.
• Parquet-, JSON-, ORC- und Avro-Dateien, die größer als 2 MB sind, können nicht in der Vorschau angezeigt werden, werden aber dennoch erfolgreich importiert.
• JSON-Dateien mit komplexen verschachtelten Objekten und Arrays dürfen in der Benutzeroberfläche nicht in der Vorschau angezeigt werden.
• Komplexe JSON-Dateien werden unverändert eingelesen, was zu Arrays als Tabelleneinträgen führt. Dies ist für eine optimale Datenvisualisierung und -analyse nicht empfehlenswert.
• Schlüssel in JSON-Dateien müssen in Anführungszeichen gesetzt werden, damit sie richtig geparst und interpretiert werden können.