Kestra получила $25M: Почему оркестрация workflow — признак кризиса разработки
Рынок workflow orchestration переживает бум. Airflow от Apache, Prefect, Dagster — все обещают укротить хаос современной data engineering. Kestra позиционирует себя как следующая эволюция: открытый код плюс enterprise-функции. Классическая история про 'лучший инструмент для решения известной проблемы'.
Но вот парадокс: чем больше инструментов оркестрации, тем сложнее становятся системы. Kestra обещает упростить управление pipeline'ами, которые существуют только потому, что мы создали архитектуры, требующие постоянной оркестрации. Получается замкнутый круг: инструменты для решения проблем, созданных другими инструментами.
RTP Global инвестирует в рынок, который по сути паразитирует на неспособности индустрии создавать простые, самодостаточные системы. Каждый новый микросервис требует оркестрации. Каждый data lake нуждается в pipeline'ах. Каждый pipeline требует мониторинга, который сам становится системой, требующей оркестрации.