Данные и базы данных

Parquet

Илья Тарасов — Parquet
МатериалParquettarasovcode

Колоночный файловый формат для аналитических данных. Значения одного столбца хранятся вместе, что помогает сжатию и чтению только нужных полей. Файл содержит схему и метаданные, поэтому отличается от простого текстового экспорта.

Пример на практике

Отчёт читает только дату и сумму из большого набора событий, не загружая тяжёлые текстовые поля.

Когда пригодится

Подходит для аналитических хранилищ и обработки больших таблиц.

Что важно учитывать

Много маленьких файлов создаёт накладные расходы; формат не предназначен для удобного редактирования вручную.

Словарь tarasovcode — проект Ильи Тарасова и TarasovWeb. Telegram-канал · #tarasovweb · #ИльяТарасов

Вернуться к 400 терминам