Welche Prädikate werden für die Pruning-Berechnung unterstützt?

Unterstützt werden Gleichheit (=), Ungleichheit (!=), Vergleichsoperatoren ( , >=), BETWEEN sowie IN-Listen.

Wie wird die Bloomfilter-Prüfung durchgeführt?

Die Prüfung nutzt native XXH64-Hashwerte und die Parquet-Split-Block-Bloomfilter-Arithmetik (SBBF) der Spalten-Chunks.

Welche Dateiformate und Größenlimits gelten?

Es werden .parquet- und .pq-Dateien bis zu einer Größe von 100 MB unterstützt.

Werden Daten während der Analyse auf einen Server übertragen?

Die Auswertung erfolgt direkt im Browser über das Decodieren des Thrift-Footers ohne externe Speicherung.

Was bedeutet ein 'Scan' im generierten Bericht?

Ein Scan tritt auf, wenn weder Zone-Maps noch Bloomfilter beweisen können, dass der gesuchte Wert in der Zeilengruppe fehlt.

Elysia Tools

Mobile Navigation

Data Analysis

Parquet-Bloom-Filter-ZoneMap-Wörterbuch- und Spaltenstatistik-Pruning-Bewerter

Dekodiert den Parquet-Thrift-Footer und quantifiziert Predicate-Pushdown-Pruning: Zone-Map-Min/Max, Split-Block-Bloomfilter (XXH64), Wörterbuchverhältnisse und Encodings, mit Pruning-Einsparungen je Zeilengruppe für Beispiel-WHERE-Klauseln.

Einzelheiten

Wobei dieses Tool hilft

Ein handgeschriebener Thrift-Compact-Reader dekodiert den Footer und läuft über jeden Page-Header; Statistiken werden zu echten Zone-Maps dekodiert; die Bloom-Mitgliedschaft führt die echte XXH64- + SBBF-Arithmetik aus; Prädikate (=, !=, <, <=, >, >=, BETWEEN, IN) werden je Zeilengruppe als durch-Zone-Map-geprunt, durch-Bloom-geprunt oder Scan eingestuft, mit Bytekosten aus totalcompressedsize.

Ausführung

Dieses Tool ausführen

Fülle das Formular aus, starte das Tool und prüfe das Ergebnis an einem Ort.

Beispiele

Beispiele zu diesem Tool

Verwandt

Parquet-Bloom-Filter-ZoneMap-Wörterbuch- und Spaltenstatistik-Pruning-Bewerter

Wobei dieses Tool hilft

Dieses Tool ausführen

Beispiele zu diesem Tool

Mit verwandten Tools und Themen fortfahren

Erfahren Sie, wann dieses Tool passt, was es unterstützt und wie Nutzer es anwenden.

Wichtige Fakten

Überblick

Wann verwenden

So funktioniert es

Anwendungsfälle

Beispiele

1. Evaluierung von ID-Lookups mit Bloomfiltern

2. Bereichsabfrage auf sortierten Zeitreihen

FAQ

Parquet-Pruning-Beispiele

Android Java Bildverarbeitungsbeispiele

Android Kotlin Bildverarbeitungsbeispiele

Web Python Bildverarbeitung Beispiele

Social-Media-Vorlagen-Raster-Composer

HDR-AVIF-zu-SDR-PNG-Tonemapper

Batch-Bildkompression

Data-URI-Generator