Cookies voor statistiek en advertenties
We gebruiken cookies voor statistiek en voor advertenties, allebei naar Google. Weigeren verandert niets aan wat je te zien krijgt.Lees de privacypagina
Parquet
Wat is een Parquet-bestand?
Kolomgewijze opslag voor grote hoeveelheden. Veel kleiner en veel sneller te bevragen dan een CSV.
Wat Parquet is
Parquet is een binair formaat dat alleen iets betekent voor een programma dat het kent. Het wordt gebruikt voor archivering en gegevens tussen programma’s verplaatsen.
De extensie is .parquet en de volledige naam Apache Parquet. Allebei zeggen ze minder dan wat het bestand kan bevatten, en daar gaat de rest van deze pagina over.
Waar Parquet vandaan komt
Apache Software Foundation bracht het in 2013 uit.
De leeftijd is om een praktische reden interessant: hoe ouder een formaat, hoe meer programma’s de tijd hebben gehad om het te leren.
De specificatie is openbaar
Iedereen mag hem uitvoeren zonder te vragen en zonder licentie te betalen. Daarom duikt het formaat in zo veel programma’s op, en daarom gaan bestanden van twintig jaar geleden nog steeds open.
Er wordt niets weggegooid
Parquet bewaart zijn inhoud precies. Opnieuw opslaan verandert niets, dus je kunt het zo vaak openen, bewerken en wegschrijven als je wilt zonder dat er schade opstapelt — en dat is wat er een werkformaat van maakt in plaats van een afleverformaat.
Wat het doet om zichzelf te beschermen
Parquet brengt een controlegetal, zodat een beschadigd bestand opvalt in plaats van stilzwijgend verkeerd gelezen te worden en optionele versleuteling mee.
Een versleuteld bestand moet worden ontgrendeld voordat iets het kan converteren, hier en overal elders. Een wachtwoord is niets waar een omzetter omheen kan, en aan een die dat wel beweert zou je het bestand al helemaal niet moeten geven.
Wat Parquet opent
pandas, Apache Spark en DuckDB lezen het, en de meeste programma’s van dezelfde soort ook.
Als een bestand niet opengaat ligt het zelden aan het formaat — vaker is het programma ouder dan het formaat. Converteren naar iets ouders is de betrouwbare weg eromheen, en daarvoor is de rest van deze site bedoeld.
Het in de browser openen
Geen enkele browser leest het.
Dat is veruit de meest voorkomende reden om het te converteren: niet dat het formaat slecht is, maar dat de plek waar je het bestand wilt tonen het niet kan lezen.
Het is een afleverformaat
Parquet is bedoeld om door te geven, niet om in te werken. Er een bewerken kan en is zelden prettig; de verstandige weg loopt via de bron en een nieuwe export.
Wat er misgaat
De terugkerende klachten: buiten het eigen terrein is de ondersteuning ongelijk.
Niets daarvan is een reden om het formaat te mijden. Het zijn de dingen die je beter kent voordat een ervan je verrast, en dat is een andere en een nuttigere bewering.
De gegevens, op één plek
| Extensie | .parquet |
|---|---|
| Mediatype | application/vnd.apache.parquet |
| Uitgegeven door | Apache Software Foundation |
| Voor het eerst gepubliceerd | 2013 |