Storage Formats Deep-Dive
Форматы хранения данных — от Parquet и ORC через Arrow до Delta Lake и Iceberg. Побайтовый разбор, кодировки, компрессия, schema evolution, table formats.
⭐ 1000 StarsО курсе
107
уроков
19
модулей
~80
часов
Продвинутый
уровень
Модули курса
- Stripes и физическая структура 25 мин Средний
- Кодировки колонок 35 мин Продвинутый
- Индексная система 30 мин Продвинутый
- Система типов 30 мин Продвинутый
- ACID-транзакции 30 мин Продвинутый
- Шифрование, Schema Evolution, сравнение с Parquet 30 мин Продвинутый
- Интерактивный ORC File Viewer 20 мин Средний
- Теория информации и кодирование 30 мин Продвинутый
- Dictionary Encoding: кросс-форматный анализ 35 мин Продвинутый
- Целочисленные кодировки: FOR, Delta, Bit-Packing 35 мин Продвинутый
- Строковые кодировки: за пределами словаря 30 мин Продвинутый
- Boolean, NULL и вложенные кодировки 35 мин Продвинутый
- Алгоритмы выбора кодировки 35 мин Продвинутый
- Внутренности алгоритмов компрессии: LZ77, Huffman, ANS 35 мин Продвинутый
- Компрессия на практике: тюнинг и измерение 30 мин Продвинутый
- BtrBlocks: каскадное кодирование 35 мин Продвинутый
- FastLanes: SIMD-оптимизированная компрессия 35 мин Продвинутый
- ALP: адаптивное сжатие float 35 мин Продвинутый
- FSST: сжатие строк таблицей символов 35 мин Продвинутый
- Будущее кодирования: compressed execution и AnyBlox 30 мин Продвинутый
- Архитектура Transaction Log 35 мин Продвинутый
- ACID-транзакции и разрешение конфликтов 30 мин Продвинутый
- Time Travel, Checkpoints и VACUUM 30 мин Продвинутый
- Оптимизация размещения данных 30 мин Продвинутый
- Change Data Feed и Streaming 30 мин Продвинутый
- Delta Kernel, UniForm и экосистема 30 мин Продвинутый
- Каталог и иерархия метаданных 40 мин Продвинутый
- Снимки, коммиты и time travel 35 мин Продвинутый
- Hidden partitioning и partition evolution 40 мин Продвинутый
- Schema evolution и column IDs 35 мин Продвинутый
- Row-level операции: CoW, MoR, deletion vectors 40 мин Продвинутый
- Обслуживание, экосистема и версии спецификации 40 мин Продвинутый