Профиль навыка

Delta Lake / Apache Iceberg

ACID-транзакции, time travel, schema evolution, форматы таблиц для озёр данных

Data Engineering Data Lakehouse

Ролей

где встречается этот навык

Грейдов

сформированная дорожка роста

Обязательных требований

ещё 0 — необязательные

Data Engineering

Data Lakehouse

17.03.2026

Выберите текущий грейд и сравните ожидания. Карточки ниже покажут, что нужно закрыть для следующего уровня.

Чего ждут на каждом уровне

Таблица показывает, как меняется глубина владения навыком от Junior до Principal.

Роль	Обязательность	Описание
Data Engineer	Обязателен	Понимает основы Delta Lake / Apache Iceberg. Работает с простыми ETL-задачами. Использует SQL для базовой обработки данных.

Роль	Обязательность	Описание
Data Engineer	Обязателен	Самостоятельно реализует data pipelines с Delta Lake / Apache Iceberg. Оптимизирует производительность. Обеспечивает data quality.

Роль	Обязательность	Описание
Data Engineer	Обязателен	Проектирует data-архитектуру с Delta Lake / Apache Iceberg. Оптимизирует для big data. Внедряет data governance и quality frameworks.

Роль	Обязательность	Описание
Data Engineer	Обязателен	Определяет Delta Lake / Iceberg стандарты: table format selection, partitioning strategy, compaction schedules. Внедряет time-travel для data debugging и schema enforcement.

Роль	Обязательность	Описание
Data Engineer	Обязателен	Проектирует open table format стратегию: Delta Lake vs Iceberg vs Hudi, catalog integration (Unity/Nessie), cross-engine interop. Определяет migration path от Hive tables.

Junior 1 требований

Data Engineer
Обязателен

Понимает основы Delta Lake / Apache Iceberg. Работает с простыми ETL-задачами. Использует SQL для базовой обработки данных.

Middle 1 требований

Data Engineer
Обязателен

Самостоятельно реализует data pipelines с Delta Lake / Apache Iceberg. Оптимизирует производительность. Обеспечивает data quality.

Senior 1 требований

Data Engineer
Обязателен

Проектирует data-архитектуру с Delta Lake / Apache Iceberg. Оптимизирует для big data. Внедряет data governance и quality frameworks.

Lead / Staff 1 требований

Data Engineer
Обязателен

Определяет Delta Lake / Iceberg стандарты: table format selection, partitioning strategy, compaction schedules. Внедряет time-travel для data debugging и schema enforcement.

Principal 1 требований

Data Engineer
Обязателен

Проектирует open table format стратегию: Delta Lake vs Iceberg vs Hudi, catalog integration (Unity/Nessie), cross-engine interop. Определяет migration path от Hive tables.

Загрузка комментариев...