Apache Iceberg
Бесплатный курс
Полный практический курс по современному табличному формату для data lakes. 6 глав, 19 уроков — от основ до продвинутых тем. Идеально для инженеров данных, аналитиков и всех, кто работает с большими данными.
Основы Iceberg
Погрузитесь в основы Apache Iceberg: узнайте, что это за табличный формат, как он устроен и почему перевернул мир data lakes. Первые шаги к пониманию архитектуры и каталогов.
Уроки (4)
Транзакции и изменения данных
Изучите транзакции и операции изменения данных. Узнайте, как Iceberg обеспечивает ACID-гарантии, безопасную эволюцию схемы и работу с обновлениями и удалениями.
Уроки (4)
Партицирование и кластеризация
Оптимизируйте хранение данных с помощью партицирования и кластеризации. Научитесь скрытому партицированию, трансформациям и Z‑ordering для ускорения запросов.
Уроки (3)
Time Travel
Откройте для себя time travel — возможность путешествовать по снапшотам таблицы, откатывать изменения и анализировать историю данных.
Уроки (2)
- →Apache Iceberg. Time Travel и откат измененийПутешествие во времени для ваших данных11 мин
- →Apache Iceberg. Упражнение: Time TravelПрактика путешествий во времени12 мин
Ветвление и метатаблицы
Освойте Git‑подобное ветвление и тегирование, а также метатаблицы для отладки и анализа внутренней структуры Iceberg.
Уроки (3)
- →Apache Iceberg. Тегирование и ветвлениеGit для ваших данных22 мин
- →Apache Iceberg. Упражнение: Ветвление и тегированиеПрактика Git‑подобного workflow16 мин
- →Apache Iceberg. МетатаблицыРентген для ваших данных15 мин
Обслуживание и экосистема
Научитесь обслуживать таблицы, удалять старые снапшоты, компактифицировать файлы и познакомьтесь с экосистемой движков запросов (Spark, Flink, Trino).
Уроки (3)
- →Apache Iceberg. Обслуживание таблицПрофилактика вместо пожаров17 мин
- →Apache Iceberg. Упражнение: Обслуживание таблицПрактика очистки и оптимизации21 мин
- →Apache Iceberg. Движки запросов и экосистемаТысяча цветов8 мин
Курс основан на материалах Tim Berglund «Apache Iceberg: The Complete Guide», дополнен, скорректирован и проверен для русскоязычной аудитории.