Для популяризации нашего нового курса для дата-инженеров по Trino мы проводим очередной бесплатный митап для аналитиков, архитекторов, инженеров данных, разработчиков, DataOps- инженеров и тех, кто интересуется современными технологиями обработки данных.
Поскольку Trino является движком для онлайн-обработки больших объемов данных с помощью распределенных SQL-запросов, ему нужна повышенная отказоустойчивость для стабильной работы при высоких нагрузках. Также фреймворк должен быстро восстанавливаться после неожиданных сбоев, таких как ошибки нехватки памяти (OOM). Для этого в Trino предусмотрен специальные механизмы отказоустойчивого выполнения запросов.
На митапе вы узнаете, как они работают, познакомитесь с политиками отказоустойчивого выполнения запросов, которые определяют, как система будет автоматически повторять выполнение отдельных задач SQL-запроса при возникновении сбоев на уровне кластера. Специальной подготовки не требуется, все будет происходить в интерактивной среде в Yandex Cloud, подготовленной специалистами Школы Больших Данных.
Программа митапа
- Краткий обзор
- История и архитектура (кратко)
- Обзор рабочего кластера Trino и рабочего места
- Процесс исполнения
- Принципы исполнения запросов в Trino
- Fault Tolerant Execution – как настраивать и что изменилось
- Подход к анализу процесса исполнения и нагрузочному тестированию
- Сравнение на реальных запросах
- Работа в «обычном» режиме
- Работа в режиме Fault Tolerant Execution
- Заключение и выводы
Продолжительность митапа — 2 часа.
Как обычно, после митапа вы получите раздаточные материалы и набор упражнений для закрепления полученных навыков. А также сможете задать вопросы преподавателю-эксперту и обсудить, как можно применять рассмотренные технологии для решения реальных задач.
Ждем вас 21 мая 17:00–19:00 МСК, онлайн.
Митап бесплатный, но нужна регистрация. Ссылка придет на почту за час до начала мероприятия.
Контактная информация: info@bigdataschool.ru или +7 (495) 41-41-121, +7 (915) 307 0074, @Bigdataschool_mck
