Data engineering как проблема кэш-инвалидации

Josh Wills, создатель dbt-duckdb и бывший глава data engineering в Slack, объясняет, почему модели сами по себе мало значат, а агенты всё ещё генерируют дорогие и неопрятные пайплайны. Главный тезис интервью - data engineering остаётся задачей инвалидации кэша даже при триллионах

Flink Kubernetes Operator 1.16.0 усиливает контроль над автоскейлингом

Вышел Apache Flink Kubernetes Operator 1.16.0. Основной акцент сделан на расширяемость автоскейлера и переработку документации. Появились три новых SPI для кастомизации, изменился алгоритм выравнивания параллелизма по умолчанию, а ресурсы подов теперь описываются стандартными объ