Yandex Cloud запустила управляемый сервис в облаке на базе open source технологии Apache Airflow.
Для чего он нужен?
Apache Airflow объединяет все сервисы платформы для извлечения, трансформации и обработки данных – Extract Transform Load, ETL – в единую систему. Теперь различными операциями по обработке данных в облаке можно управлять более гибко. Для компаний это прямая возможность быстрее создавать дата-проекты в облаке — от корпоративных хранилищ в данных до рекомендательных систем.
В Yandex Cloud Apache Airflow интегрирован с:
• объектным хранилищем;
• управляемыми СУБД;
• BI-инструментами;
• сервисами машинного обучения облачной платформы.