Konnektor für Dateiformat
Der Datenkatalog für JSON, dem Ihr ganzes Team vertrauen kann.
Der Dawiso-JSON-Konnektor macht aus hierarchischen JSON-Dateien durchsuchbare, gesteuerte Metadaten: verschachtelte Felder, Arrays, Struktur und Verantwortung, die Ihre Teams in Dawiso dokumentieren können.
Zuerst das Wichtigste
Was ist ein Konnektor?
Ein Konnektor ist die Brücke zwischen einem Werkzeug in Ihrem Stack und dem Katalog, der Ihnen einen einheitlichen Blick darauf gibt. Ist ein Konnektor eingerichtet, greift er nach Zeitplan auf das Quellsystem zu, liest die Metadaten aus - Schemas, Tabellen, Dashboards, Jobs, Verantwortlichkeiten, Data Lineage - und bildet sie im Katalog ab. Ihre eigentlichen Zeilen und Werte bleiben, wo sie sind.
Konnektoren sind der Grund, warum ein Datenkatalog Fragen wie „Welches Power-BI-Dashboard hängt von dieser Snowflake-Tabelle ab?“ oder „Wer verantwortet das orders-Topic in Kafka?“ beantworten kann - automatisch, ohne dass jemand eine Excel-Liste pflegen muss.
Drei Eigenschaften unterscheiden einen guten Konnektor von einem brüchigen: Er sollte nur lesend und sicher sein, er sollte inkrementell arbeiten, damit nicht bei jeder Aktualisierung ein vollständiger Neuscan nötig ist, und er sollte Data Lineage über Systemgrenzen hinweg auflösen, nicht nur innerhalb eines Werkzeugs.
Über die Plattform
Was ist JSON?
JSON, Anfang der 2000er von Douglas Crockford spezifiziert und als ECMA-404, RFC 8259 und ISO/IEC 21778 standardisiert, ist das Austauschformat, auf dem das moderne Web läuft. Auszüge aus der REST API, Ereignis-Nutzlasten, Konfigurationsdateien, Exporte aus SaaS-Werkzeugen: das meiste davon ist JSON.
JSON-Dateien in Ihrer Datenpipeline lassen sich leicht übersehen: Sie liegen zwischen dem API-Aufruf und dem Laden ins Warehouse, oft in git versioniert, oft so tief verschachtelt, dass sie niemand richtig katalogisiert. Wenn eine nachgelagerte Spalte kaputtgeht, weiß niemand, welcher Schlüssel in welcher Nutzlast sich geändert hat. Genau dort setzt der Dawiso-JSON-Datenkatalog an: nur lesend, nur Metadaten, und plattformübergreifend.
Architektur
So verbindet sich Dawiso mit JSON
Eine kleine, nur lesende Rolle aufseiten von JSON. Der Dawiso-Scanner holt die Metadaten nach Zeitplan. Alles landet in Ihrem Katalog, fachlich lesbar.
Quelle
JSON-Dateipfad
- Dateien und Ordner
- Schlüssel der obersten Ebene
- Verschachtelte Objekte und Arrays
- Abgeleitete Schemas
Dawiso-Scanner
Metadatenzugriff nur lesend
- Schema- und Objekterkennung
- Auflösung von Abhängigkeiten
- SQL-Flow-Parsing (optional)
- Sampling nach Opt-in
Katalog
Dawiso-Plattform
- Durchsuchbare Metadaten
- Data Lineage und Verantwortlichkeiten
- Business Glossary
- Richtlinien und Klassifizierungen
Verbindungsdetails
- Protokoll
- Scan des Dateipfads über die Dawiso Integration Runtime (DIR)
- Authentifizierung
- Nur private Verbindung · DIR mit Leserecht auf den Dateipfad
- Lineage
- JSON-Dateien werden zu Katalog-Assets, deren verschachtelte Struktur, abgeleitete Typen und Verantwortung in Dawiso dokumentiert sind
Einrichtung
JSON in 4 Schritten verbinden
- 01
Dateipfad festlegen
Bestimmen Sie die Netzwerkfreigabe, den SFTP-Ort oder den eingebundenen Pfad im Cloud-Speicher, an dem die JSON-Dateien liegen. DIR braucht Leserecht auf diesen Pfad.
- 02
Private Verbindung anlegen
Für diesen Anbieter werden ausschließlich private Verbindungen unterstützt. Tragen Sie den vollständigen Dateipfad ein; DIR prüft, ob er vom Host der Runtime aus erreichbar ist.
- 03
Umfang der Ingestion wählen
Entscheiden Sie, ob Dawiso den ganzen Ordner einliest oder eine Auswahl über ein Muster. Stellen Sie die Häufigkeit so ein, wie oft neue Nutzlasten eintreffen.
- 04
Ingestion starten
Der geplante Sync hält den Katalog aktuell, während Dateien eintreffen. Schema-Drift zwischen zwei Läufen wird festgehalten; neue und entfallene Schlüssel erscheinen als Änderungen im Katalog.
Funktionen
Das bekommen Sie mit dem Konnektor für JSON
-
Katalog verschachtelter Schlüssel
Jeder Schlüssel der obersten Ebene, jedes verschachtelte Objekt und jedes Array-Element ist in Dawiso durchsuchbar. Finden Sie mit zwei Klicks, welche Nutzlast customer.address.country führt.
-
Schema-Drift im Blick
Geplante Scans halten fest, welche Schlüssel zwischen zwei Läufen hinzugekommen, geändert oder entfallen sind. Verschiebt sich die Form einer Nutzlast, zeigt der Katalog genau, welcher Schlüssel sich geändert hat.
-
Erkennung abgeleiteter Typen
Dawiso leitet je Schlüssel den Typ aus dem Dateiinhalt ab. Zeichenketten, Zahlen, Wahrheitswerte, Arrays und verschachtelte Objekte werden ausgewiesen, sodass der Katalog die wirkliche Form abbildet.
-
Verantwortung für Dateien
Weisen Sie JSON-Dateien Verantwortliche und Stewards zu, genau wie Tabellen. Das Team, das die Nutzlast schreibt, verantwortet den Kontrakt.
-
Nur Metadaten, dank DIR
Dateien verlassen Ihr Netz nie. DIR liest die Struktur lokal und schickt nur Katalogeinträge in den Dawiso Tenant.
-
Beschreibungen per KI
Optional entwirft Dawiso Beschreibungen für Felder und Dateien aus abgeleiteten Typen und Benennung. Vor der Veröffentlichung gibt eine Person sie frei.
Geschäftlicher Nutzen
Warum Teams den Konnektor für JSON aktivieren
- Durchgängig
Nutzlasten werden zu vollwertigen Assets
Auszüge aus der REST API und Ereignis-Nutzlasten sind nicht länger unsichtbar. Der Katalog führt jeden Schlüssel, jeden Typ und jeden Verantwortlichen neben den Warehouse-Tabellen.
- 0 Kopien
Keine Daten verlassen Ihr Netz
DIR scannt lokal und sendet nur Metadaten an Dawiso. Sensible Ereignis-Nutzlasten bleiben, wo sie sind, und das Audit-Team bleibt zufrieden.
- Prüfbereit
Schema-Drift mit Belegen
Geplante Scans halten je Lauf fest, welche Schlüssel hinzugekommen, geändert oder entfallen sind. Erzeugende und nutzende Seite sehen, wann sich der Kontrakt verschoben hat.
Bereit, Ihr JSON zu katalogisieren?
Den Konnektor richten Sie an einem Nachmittag ein. Ihren ersten Lineage-Graph sehen Sie noch am selben Tag.
Häufige Fragen
Was sind JSON-Metadaten?
Hat JSON einen Datenkatalog?
Wozu dient ein Datenkatalog?
Öffnet Dawiso jede JSON-Datei?
Kann Dawiso mit JSON Lines oder NDJSON umgehen?
Und bei tief verschachtelten Nutzlasten?
Wo liegen meine JSON-Dateien?
Weitere Konnektoren entdecken
JSON ist einer von über 30 Konnektoren. Bringen Sie Ihren gesamten Stack in den Katalog.
-
Data Warehouse Snowflake -
Data Lakehouse Databricks -
Business Intelligence Power BI -
Business Intelligence Tableau -
Data Warehouse Google BigQuery -
Data Warehouse Amazon Redshift