ParquetからNDJSON

Parquet を NDJSON に変換

一度に100ファイルまで。フォーマットが混ざっていても構いません。

ここで Parquet を NDJSON に変換できます。無料、アカウント不要です。ファイルを上の枠に落とせば、数秒で結果がダウンロードできる状態になります。変換はお使いのブラウザーの中で行われるので、ファイルはアップロードされません。Windows でも macOS でも Linux でも、iPhone でも Android でも同じように動き、通信を切っても動き続けます。

処理される場所
ブラウザーの中です。ファイルがアップロードされることはありません。
可逆
何も捨てられません。NDJSONはParquetが持っていたものをそのまま保持します。
ファイルサイズの上限
1ファイルあたり100MBまで。無料、アカウント不要です。

Parquet と NDJSON は何のための形式か

大量のデータのための列指向の保存形式。CSV よりずっと小さく、ずっと速く問い合わせられます。

1 行に 1 つの JSON オブジェクト。ログのパイプラインやデータ書き出しが出力する形です。

Parquet を NDJSON に変換する手順

お手元の Parquet ファイルをこのページに落とすか、押してファイルを選んでください。
変換先に NDJSON を選びます。変換はブラウザーの中で行われ、ファイルはアップロードされません。
できあがった NDJSON ファイルをダウンロードします。

Parquet と NDJSON——何が変わるか

ParquetとNDJSONの比較
	Parquet	NDJSON
正式名称	Apache Parquet	Newline-Delimited JSON
拡張子	.parquet	.ndjson, .jsonl
メディアタイプ	application/vnd.apache.parquet	application/x-ndjson
圧縮方式	可逆 — 何も捨てない	—

残るもの

失われるものはありません。Parquet も NDJSON も中身を劣化なしに保持します。この変換が変えるのは包み方であって品質ではないので、劣化が積み重なる心配をせずに何度でも繰り返せます。

変換先の形式が追加で扱えるもの

NDJSON は作業のための形式で、Parquet は完成したものを渡すための形式です。戻ってくるのはページの絵ではなく、編集できる文字です。たいていはそれがこの変換の理由であり、同時にこの変換の限界でもあります。

結果を開く

pandasは Parquet と NDJSON のどちらも読めるので、別のプログラムを開かずに、結果を元のファイルと並べて確かめられます。

どちらの形式が何のためのものか

NDJSON は 2013 年から使われています。jqとpandasがこの形式を読めます。

Parquet から NDJSON：よくある質問

Parquet ファイルはどこかにアップロードされますか。

いいえ。この変換は完全にブラウザーの中で行われるので、ファイルが端末から出ることはありません。ご自分で確かめられます。開発者ツールのネットワークタブを開いて、何か変換してみてください。ページそのものと、このサービスの費用をまかなっている分析・広告のリクエストは見えますが、あなたのファイルを運んでいるリクエストはひとつもありません。

Parquet から NDJSON への変換は無料ですか。

はい。アカウントも透かしもなく、変換できる本数にも上限はありません。お使いの機械の上で動くので、当方には費用が発生しないからです。ブラウザーは 100 MB までのファイルを扱えます。

Parquet を NDJSON に変換すると品質は落ちますか。

いいえ。NDJSON は同じ内容を何も捨てずに保持できるので、結果は品質の点で元のファイルと同じです。

Parquet から NDJSON への変換は可逆ですか。