Parquet — колоночный формат. Данные организованы в row groups, внутри которых значения каждой колонки хранятся отдельными column chunks.
Какой тип хранения у Parquet: строковый или колоночный?
Parquet — колоночный формат. Данные организованы в row groups, внутри которых значения каждой колонки хранятся отдельными column chunks.
Короткий ответ
Что ответить на собеседовании
Подробный разбор
Ответ с пояснениями
Parquet — колоночный формат. Данные организованы в row groups, внутри которых значения каждой колонки хранятся отдельными column chunks.
Это позволяет читать выбранные колонки и эффективно сжимать похожие значения. Метаданные и статистика могут помочь пропустить ненужные группы или страницы, если движок поддерживает такую оптимизацию. Наличие row groups не делает Parquet строковым форматом: внутри группы физическая организация остаётся колоночной.