Ваши данные живут в двух местах, и оба вас раздражают. Data Lake (озеро) — дёшево и масштабируется до петабайт, но это дикий запад: никаких транзакций, никакого порядка, один недописанный джоб — и вы уже не уверены, что в таблице правда. Data Warehouse (DWH) — быстро, под контролем, с ACID, но счёт за хранение растёт как на дрожжах, а любой Python-скрипт из ML-команды смотрит на него с подозрением.
