.ndjson와 .parquet는 어떻게 다른가요?
- 확장자
- .ndjson
- .parquet
- 형식
- 텍스트
- 바이너리
- 카테고리
- 개발
- 데이터
- 개발자
- The Apache Software Foundation
- 설명
- NDJSON 파일은 각 줄에 하나의 JSON 값을 저장하며, 일반적으로 한 줄에 레코드 하나가 들어 있어요. JSON Lines와 동일한 형식이에요.
- Parquet 파일은 열 기반 데이터 테이블이에요. 각 열을 개별적으로 압축하고 데이터 유형 정보와 함께 저장하므로, 분석 도구가 필요한 열만 읽을 수 있어요. 데이터 레이크, Spark, pandas, DuckDB에서 널리 쓰이는 데이터 교환 형식이에요.
- MIME 유형
- application/x-ndjson
- application/vnd.apache.parquet