Все курсы

PRAR: Практическая архитектура данных

Практическая архитектура данных

Даты начала курса
29 января 2024
22 апреля 2024
Стоимость обучения 66 000 руб. Регистрация
Длительность обучения 24 ак.часов
Код курса PRAR
Классические методы, современные подходы и лучшие практики архитектуры и интеграции данных для проектных команд. На примерах платформенных решений, корпоративных фабрик данных, микросервисов и веб-приложений.

Кому нужны курсы по архитектуре и интеграции данных

Практический курс по архитектуре данных предназначен для ИТ-архитекторов, участников Е2Е команд, разработчиков фронтальных систем и микросервисов, дата-инженеров и SQL-программистов, корпоративных, системных и бизнес-архитекторов, архитекторов решений и данных, владельцев продуктов, менеджеров проектов и Q&A-инженеров.

Как построено обучение

Цель курса: формирование высокоэффективных производственных процессов через практическое применение кросс-доменных концепций на современном технологическом стеке, повышение качества и увеличение производственного потенциала, как решающих факторов интенсивного развития и удовлетворения потребностей бизнеса в целом.

В результате обучения вы получите следующие знания и навыки:

  • приобретете базовые знания, необходимые для
    реструктуризации и рефакторинга кодовой базы, хранилищ, моделей и интерфейсов
    интеграции данных;
  • сможете определять пути, средства и методы
    оздоровления и контроля в условиях нестабильного функционирования\отставания крупных систем;
  • научитесь выбирать и использовать инструменты,
    способствующие ускорению бизнеса и внедрению инструментов повышения качества
    продуктов, технологий, производства, логистики и персонала.

Продолжительность: 6 дней, 24 академических часа

По окончании курса «Практическая архитектура данных» в нашем лицензированном учебном центре «Школа Больших Данных»вы получите сертификат или удостоверение установленного образца, которые могут засчитываться в качестве свидетельств о повышении квалификации.

Программа курса Практическая архитектура данных

  • Теория – основные проблемы вертикального масштабирования систем (EJB, Ц(К)ХД, λ)
  • Теория – развитие подходов и тенденций разработки (modern, rapid, reactive)

РСУБД. Движки, транзакции, уровни изоляций, тяжелые корректировки, карты индексов, DDL\DML, реверс данных большого числа источников

Теория – обзор по проблемам и оптимизации РСУБД, реверс и интеграция данных, работа с ORM и без

NoSQL. Современные решения Scylla, Cassandra, Aerospike, Snowflake

Теория – обзор по проблемам и оптимизации NoSQL, основные принципы проектирования, избыточность, рэнджи, надгробия, ограничения open-source решений

 Поисковые системы. ES, Solr, Lucene.

Теория – обзор по проблемам и оптимизации, проектирование коллекций различных типов, словари, аналайзеры, токенайзеры

 Хранилища неструктурированных данных HDFS, S3

Теория – основные проблемы и стратегии использования

 Интеграция данных на системном уровне

Теория – хэндлеры импорта\экспорта, вторичные индексы, дампы и координированные репликаты, первичные заливки, валидация, датафлоу

 Интеграция данных на прикладном уровне

Теория – классические ETL-инструменты и кодогенерация (DataStage, SAS DI, Talend, Informatica), потоковая обработка на Spark (Streaming)\Kafka

Трехуровневая архитектура данных

  • Проектирование от БД
  • Проектирование от UI
  • Проектирование от API
  • Low-code\Zero-code и проектирование в ширину
  • Рефакторинг моделей данных
  • Интеграционное тестирование данных

 Платформенная архитектура данных

  • Введение в основные модули
  • Базовые стратегии развития платформ обработки данных
  • Рефакторинг платформенных компонентов

 МДМ системы

  • Классические МДМ системы (прямые\обратные потоки, смежные системы, события\НСИ, корректировки)
  • Интеграция МДМ системы (Очереди, БД, пакетные интерфейсы
  • бработки)
  • Миграция МДМ систем (разбор проблем и задач)

 МДМ, как основа платформы данных

  • Комбинированные типы хранилищ и базовые интерфейсы интеграции
  • Технологии кодогенерации
  • Платформенные, базовые и прикладные сервисы
  • Актуальные проблемы и задачи

 Практика – анализ схем БД, разбор архитектуры данных в разрезе планов запросов и гибкости расширения моделей

  • Всё — граф. Кросс-доменная архитектура данных
  • События и деконцептуализация времени
  • Дискретная геометрия и реентерабельность данных\кода
  • БД (Очереди, вложенность, триггеры, реорги, кубы)
  • Спагетти-сервисы (топологии, парсинг событий, параметризация)
  • Моки и покрытие тестами (производственные конвейеры, CI\CD)
  • Диффузия моделей и кода
  • Масштабирование производства (экосистема, платформа-сервисы, ядро-приклад)

 

 Практика  Заполнение карт лабораторного анализа для выявления и регистрации значений показателей качества текущей проектной деятельности и архитектурных решений, для проведения ретроспективного анализа с целью сравнения планового\достигнутого результата реализации и актуализации методических рекомендаций по дорожной карте проекта. (грумминг проектов участников курса). 

Программа курса «PRAR: Практическая архитектура данных»

Скачать программу курса «PRAR: Практическая архитектура данных» в формате pdf

Укажите e-mail, на который будет оправлена ссылка для скачивания файла:

Если у Вас остались вопросы Вы можете позвонить к нам по телефону +7 (495) 414-11-21  или заполнить форму обратной связи на сайте.
Я даю свое согласие на обработку персональных данных и соглашаюсь с политикой конфиденциальности.

Поиск по сайту