Авторский учебный курс «Администрирование базы данных Greenplum / Arenadata DB»

• 5-дневный обучающий курс «Администрирование базы данных Greenplum / Arenadata DB» предназначен для подготовки администраторов и специалистов, отвечающих за установку и обслуживание базы данных Greenplum / Arenadata DB, включая предварительную подготовку и планирование систем для установки Greenplum, настройку конфигурации сервисов, табличного пространства, безопасности и клиентского доступа, а также операций мониторинга и решения проблем с эксплуатацией Greenplum / Arenadata DB. Курс предоставляет необходимые знания и навыки по сопровождению и поддержке базы данных Greenplum / Arenadata DB при эксплуатации в облачной инфраструктуре и дата центре. Подробно рассматриваются вопросы загрузки/выгрузки данных, средства резервного копирования и восстановления системы, настройки безопасности и интеграция.

Соотношение теории к практике: 50/50

Аудитория:

Администраторы и специалисты желающие получить практические навыки по установке, конфигурированию, обслуживанию и управлению кластером Greenplum / Arenadata DB.

Предварительная подготовка:

• Знание базовых команд Linux (опыт работы с командной строкой, файловой системой , POSIX, текстовыми редакторами vi, nano)
• Основы работы с базами данных
• Опыт работы с PSQL/ SQL

 Программа курса «Администрирование базы данных Greenplum / Arenadata DB»

1. Введение в СУБД Greenplum / Arenadata DB
   • Архитектура  Greenplum / Arenadata DB / MPP
   • Greenplum Мастера и Сегменты
   • Greenplum Interconnect
   • Отказоустойчивость
   • Выбор дистрибутива

2. Установка и настройка Greenplum / Arenadata DB
   • Требования по установке.
   • Планирование и масштабирование.
   • Установка с использованием ADCM. Ручная установка.
   • Настройка Data Layout и параметров окружения.
   • Управление сервисами Greenlum / Arenadata DB
   • Клиентское подключение к БД. Клиентские приложения и утилиты.
   • Greenplum / Arenadata DB в облаке
   • Практическая работа: Установка и настройка Arenadata DB с использованием ADCM
   • Практическая работа: Установка и настройка Greenplum DB
     

3. Терминология и основные концепции Greenplum /Arenadata DB
   • Распределенная БД и политики распределения
   • PQE — Parallel Query Execution
   • MPP — Massive Parallel Processing
   • MVCC — MultiVersion Concurrency Control
   • PXF – Platform Extension Framework

4. Схемы и объекты СУБД Greenplum /Arenadata DB
   • Логическая и физическая структура БД
   • Установка по умолчанию: схемы и шаблоны
   • Табличные пространства в Greenplum / Arenadata DB
   • Внешние таблицы
   • Создание и обслуживание индексов
   • Создание и управление представлениями (views)
   • Практическая работа: Предварительная настройка кластера Greenplum DB
     

5. Операции обслуживания СУБД Greenplum / Arenadata DB
   • Управление ресурсами кластера- ресурсные группы
   • Управление данными в Greenplum /Arenadata DB
   • Вставка, обновление и удаление строк
   • Очистка (Vacuum)  базы данных
   • Масштабирование (Расширение) кластера
   • Планы запросов
   • Управление файлами логов БД
   • Реиндексация
   • Задачи операций обслуживания
   • Практическая работа: Настройка и  использование ресурсных групп на кластере Greenplum
   • Практическая работа: Операции обслуживания базы данных Greenplum
   • Практическая работа: Масштабирование кластера Greenplum добавлением узлов сегментных хостов

6. Загрузка и выгрузка данных в Greenplum / Arenadata  DB
   • Механизмы загрузки и выгрузки данных
   • Использование внешних таблиц
   • Сценарии загрузки данных в БД
   • Интеграции с другими источниками: Kafka, Hadoop, NiFi, S3
   • Практическая работа: Настройка доступа Greenplum к внешним данным и работа с внешними таблицами
   • Практическая работа: Настройка сервиса PXF для кластера Greenplum
     

7. Партиционирование таблиц
   • Создание партиционированных таблиц
   • Ключ партиционирования
   • Разные типы хранения
   • Tablespace
   • Мульти-партиционирование
   • Удаление, разбиение, обмен партиций
   • Внешние таблицы (обычные и web-внешние)
   • Практическая работа: Загрузка в партиционированные таблицы

8. Отказоустойчивость в Greenplum / Arenadata DB
   • Опции отказоустойчивости для Greenplum / Arenadata DB
   • Зеркалирование сегментов в  Greenplum
   • Отказоустойчивость Сегментов и восстановление в  Greenplum
   • Зеркалирование Мастеров в Greenplum
   • Восстановление сегмента. Восстановление мастера
   • Практическая работа:Обеспечение отказоусточивости кластера Greenplum с помощью зеркалирования сегментов
     
   • Практическая работа: Обеспечение отказоусточивости кластера с помощью зеркалирования Мастера
   • Практическая работа: Восстановление после сбоя зеркал сегментов и мастера

9. Резервное копирование и восстановление БД
   • Основные принципы операций восстановления и резервного копирования
   • Backup утилиты Greenplum / Arenadata DB
   • Процедура резервного копирования
   • Процедура восстановления БД
   • Практическая работа: Резервное копирование и восстановление кластера Greenplum DB
     

10. Мониторинг и troubleshooting СУБД
    • Мониторинг и анализ состояния системы (System state)
    • Инструменты мониторинга Arenadata DB / ADCM
    • Основные причины проблем производительности
    • Собираемые метрики и сбор статистики
    • Управление нагрузкой и оповещениями
    • Мониторинг журналов: анализ сообщений об ошибках и идентификация проблемных запросов
    • Оптимизация параметров БД и дизайна БД
    • Best Practices
    • Практическая работа: Настройка мониторинга кластера Greenplum DB
      

11. Безопасность в Greenplum / Arenadata DB
    • Контроль доступа и обеспечение безопасности
    • RBAC в СУБД Greenplum / Arenadata DB
    • Поддержка шифрования и аутентификации с использованием SSL
    • Интеграция с LDAP
    • Практическая работа: Настройка LDAP аутентификации для Greenplum
      

Примечание: лабораторные работы в курсе проводятся с использованием лабораторного стенда в облаке AWS или Яндекс/VKcloud на community версии дистрибутива Greenplum / Arenadata DB 6.XX