Learning Platform
Каталог / Data Engineering / Apache Flink Internals
Глоссарий Troubleshooting
Курс 17 · Data Engineering

Apache Flink Internals

Глубокое погружение во внутренности Apache Flink 2.x для senior data engineers. От архитектуры JobManager/TaskManager и credit-based flow control до Calcite SQL planner, RocksDB+ForStDB state backends, disaggregated state (Flink 2.0+), 2PC exactly-once internals и multi-region DR. Покрывает Lakehouse-стек (Paimon, Fluss), CEP/Pattern API, AI-фичи 2.1/2.2 (CREATE MODEL, ML_PREDICT, VECTOR_SEARCH), PyFlink, форматы сериализации. Курс для тех, кто уже writes Flink jobs и хочет понять как тюнить их в проде.

Advanced
Уровень
94
Уроков
90
Часов
22
Модулей
Начать курс → К первому уроку
Программа
22 модулей · 94 уроков
00
Введение в курс
6 уроков · 3 ч
6 уроков Открыть →
01
Философия Flink internals
6 уроков · 3 ч
6 уроков Открыть →
02
Архитектура deep — JobManager, TaskManager, slots
10 уроков · 5 ч
10 уроков Открыть →
03
Network stack и credit-based flow control
8 уроков · 4 ч
8 уроков Открыть →
04
Memory model
8 уроков · 4 ч
8 уроков Открыть →
05
State backends internals — RocksDB LSM
10 уроков · 5 ч
10 уроков Открыть →
06
Checkpoint internals — Chandy-Lamport ABS
10 уроков · 5 ч
10 уроков Открыть →
07
Savepoints и State Processor API
8 уроков · 4 ч
8 уроков Открыть →
08
Watermarks deep
8 уроков · 4 ч
8 уроков Открыть →
09
SQL planner — Apache Calcite
10 уроков · 5 ч
10 уроков Открыть →
10
Disaggregated state и ForStDB
10 уроков · 5 ч
10 уроков Открыть →
11
Adaptive scheduling и Reactive mode
8 уроков · 4 ч
8 уроков Открыть →
12
Exactly-once internals — 2PC protocol
8 уроков · 4 ч
8 уроков Открыть →
13
Source/Sink V2 internals — FLIP-27
8 уроков · 4 ч
8 уроков Открыть →
14
Lakehouse — Paimon и Fluss
10 уроков · 5 ч
10 уроков Открыть →
15
CEP и Pattern API
8 уроков · 4 ч
8 уроков Открыть →
16
AI и Streaming Inference
8 уроков · 4 ч
8 уроков Открыть →
17
Форматы и сериализация
8 уроков · 4 ч
8 уроков Открыть →
18
PyFlink
8 уроков · 4 ч
8 уроков Открыть →
19
Performance, profiling и observability
10 уроков · 5 ч
10 уроков Открыть →
20
Multi-region и Disaster Recovery
8 уроков · 4 ч
8 уроков Открыть →
21
Capstone — production-grade Flink platform
10 уроков · 5 ч
10 уроков Открыть →

Ещё в направлении · Data Engineering

Все материалы направления →