S3

S3 — объектное хранилище, де-факто стандарт для хранения данных в облаке. Именно в S3 обычно лежат файлы Parquet, Iceberg-таблицы и резервные копии дата-инфраструктуры.

На этом теге мы рассматриваем работу с S3-совместимыми хранилищами в пайплайнах: выгрузку данных через dbt-материализации, использование Iceberg поверх S3 и настройку доступа.

Отдельно разбираем интеграции с Yandex Cloud, где S3-совместимый протокол тоже является основой хранения данных.

Материалы помогут построить надёжное и недорогое озеро данных на объектном хранилище.