Для продвижения нашего нового курса для дата-инженеров Школа Больших Данных проводит очередной бесплатный митап для аналитиков, архитекторов, инженеров данных, разработчиков, DataOps- инженеров и тех, кто интересуется современными технологиями обработки данных.
Trino – это распределенный SQL-движок с массово-параллельной архитектурой и открытым исходным кодом, предназначенный для работы с большими объемами данных в разных неоднородных источниках. Он работает очень быстро, позволяя запрашивать реляционные и нереляционные базы данных, брокеры сообщений и объектные хранилища, используя классические SQL-запросы.
На митапе вы будете запускать кластер Trino, настраивать коннекторы и каталоги, а также выполнить федеральные запросы к PostgreSQL и объектным хранилищам. Также за 2 часа вы познакомитесь с особенностями Apache Iceberg и протестируете работу планировщика Trino на примере запросов бенчмарка TPC-DS, чтобы оценить производительность кластера. Специальной подготовки не требуется, все будет происходить в интерактивной среде в Yandex Cloud, подготовленной специалистами Школы Больших Данных.
Программа митапа
- Краткий обзор
- История
- Архитектура
- Установка и настройка
- Требования к системе
- Конфигурационные файлы
- Старт/стоп кластера
- Клиенты и доступ
- Вэб интерфейс
- Коннекторы
- Встроенные
- MEMORY
- РСУБД (на пример PostgreSQL)
- Объектные хранилища (на примере Яндекс облака)
- Метастор (на примере HMS)
- Apache Iceberg
- Процесс исполнения
- Принципы и сравнение с другими движками
- Stage, task, driver, split
- Планировщик
- Оптимизатор
- Системные таблицы
- История запросов
- Статистика исполнения запроса
- Визуализация
Продолжительность митапа — 2 часа.
После митапа каждый участник получит раздаточные материалы и набор упражнений для закрепления полученных навыков. Также вы сможете задать вопросы преподавателю-эксперту и обсудить перспективы применения полученных знаний для решения ваших рабочих задач.
МЕРОПРИЯТИЕ БУДЕТ ПРОВОДИТЬСЯ НА ПЛАТФОРМЕ MTS-LINK. Ссылка придет на почту за час до начала мероприятия.
Контактная информация: info@bigdataschool.ru или +7 (495) 41-41-121, +7 (915) 307 0074, @Bigdataschool_mck