Funktionsweise
Fügen Sie Ihre Apache-Avro-Daten-Datei hinzu. MimiFile prüft das Format, konvertiert die Datei in Apache-Parquet-Daten und stellt das Ergebnis vorübergehend zum Download bereit.
Apache-Avro-Daten in Parquet konvertieren. Beide Formate unterstützen typisierte und strukturierte Daten, verfolgen aber unterschiedliche Speicheransätze: Avro ist datensatzorientiert, Parquet spaltenorientiert.
AVRO → PARQUET
Dateien hierher ziehen, einfügen oder auf dem Gerät auswählen.
Dateien werden nur vorübergehend gespeichert und automatisch gelöscht.
Limits: 32 MB pro Datei · 128 MB insgesamt pro Stapel.
Fügen Sie Ihre Apache-Avro-Daten-Datei hinzu. MimiFile prüft das Format, konvertiert die Datei in Apache-Parquet-Daten und stellt das Ergebnis vorübergehend zum Download bereit.
Kompatible Felder können typisiert in Parquet geschrieben werden. Prüfen Sie bei komplexen Schemas insbesondere Unions, logische Typen, verschachtelte Strukturen und Binärfelder, weil die beiden Formate diese nicht immer identisch modellieren.
Aktuelles Quelllimit : 32 MB pro Datei. Bis zu 10 Dateien können innerhalb des globalen Limits für die Stapelverarbeitung gemeinsam gesendet werden.
Avro organisiert Daten datensatzorientiert, während Parquet Werte spaltenorientiert speichert. Die Konvertierung erzeugt daher eine neue Datenrepräsentation und ist kein Umbenennen der Dateiendung.
Kann ein tabellarisches Zielformat Listen oder Objekte nicht direkt darstellen, werden verschachtelte Werte nach Möglichkeit als JSON-Text serialisiert.
Nullwerte und Zeitangaben bleiben erhalten, wenn das Zielformat sie unterstützt. Binärdaten können in Text- oder Tabellenausgaben als Base64 dargestellt werden.
Prüfen Sie Spaltentypen, Nullwerte, Zeitangaben und verschachtelte Felder, bevor die konvertierte Datei in einer produktiven Datenpipeline eingesetzt wird.