Какие 4 проблемы сдерживают повсеместное внедрение Big Data и как их решать
По заявлению заместителя председателя правительства РФ Максима Акимова, сделанному 29 ноября 2018 года на форуме «Россия зовёт!«, в настоящее время органы власти используют более 400 различных государственных информационных систем (ГИС), которые частично дублируют друг и друга и не интегрированы между собой [1]. Это увеличивает время обработки данных и затрудняет доступ граждан и бизнеса к информации.
Поэтому необходим единый для всех государственных структур порядок получения, хранения, использования, предоставления, обработки и управления информации. Например, чтобы каждый россиянин мог зарегистрировать брак, рождение ребенка, смену места жительства или транспортного средства без посещения отраслевых или мультифункциональных центров (МФЦ) и стояния в очередях на получение бумажных документов.
Для перехода к национальному цифровому документообороту (большим данным) нужна соответствующая информационно-техническая среда и тщательно проработанное административно-правовое поле [2]. Поэтому 25 ноября 2018 года на заседании рабочей группы по цифровому госуправлению АНО «Цифровая экономика» обсудили первую версию концепции национальной системы управления данными (НСУД), которая должна объединить данные из различных реестров и ГИС [3]. НСУД будет основана на существующей инфраструктуре электронного правительства — Единой системы идентификации и аутентификации, Федерального реестра госуслуг, Системы межведомственного электронного взаимодействия, Единой системы нормативно-справочной информации, а также системы цифрового профиля гражданина и цифровой аналитической платформы, которые в настоящее время находятся на стадии разработки [2].
Согласно дорожной карте АНО «Цифровая экономика», запуск НСУД запланирован на конец 2021 года, с 2022 г. по 2025 должны быть завершены процедуры гармонизации данных и подключения к системе различных ведомств и отраслевых ГИС [2].
Аналитика больших данных для руководителей
Код курса
BDAM
Ближайшая дата курса
13 января, 2025
Продолжительность
24 ак.часов
Стоимость обучения
72 000 руб.
При этом следует решить 4 основные проблемы:
- Административно-правовая – сейчас не существует полного набора нормативных документов, четко определяющих права и обязанности поставщиков и потребителей информации НСУД;
- Организационная – пока неясно, каким образом данные от бизнеса будут поступать в НСУД и как будет изменяться их состояние жизненного цикла с учетом глобализации и отраслевой специфики;
- Техническая – модели представления и форматы хранения данных в разных ГИС кардинально отличаются друг от друга;
- Кадровая – недостаточное количество ИТ-специалистов по аналитике и обработке больших данных.
Решение 2-х первых задач невозможно без правительственных инициатив, но внести свой вклад в остальные задачи каждый из нас может уже сегодня. Технологии Big Data предназначены для аналитической обработки различных массивов информации большого объема. Большинство наиболее популярных продуктов для построения и обслуживания Big Data-инфраструктуры основаны на решениях зарубежных компаний и организаций, в частности, Apache, например, Hadoop, Drill, Apache Kafkа, Apache Spark и т.д.
Однако, они распространяются по лицензии open source, т.е. с открытым исходным кодом. А это значит, что продукты, созданные на их основе, смогут считаться в РФ самостоятельными решениями, согласно новому законопроекту, представленному АНО «Цифровая экономика» на заседании рабочей группы по нормативному регулированию 23 января 2019 года [4]. Таким образом будет поддержана правительственная инициатива об импортозамещении в сфере ИТ и переводе госсектора на отечественные продукты.
Что касается вопроса подготовки ИТ-специалистов, уже в этом году на наших практических курсах вы можете освоить все, что нужно для успешной работы с большими данными: методы аналитики и машинного обучения, основы и функционал компонентов экосистемы Hadoop, безопасность в Data Lake, Интернет Вещей, GDPR и множество других интересных и полезных вещей по инструментам и методам анализа больших данных [5].
Очередной набор на курс «Аналитика больших данных для руководителей» состоится уже скоро. Смотрите подробную информацию об обучении здесь. До встречи!
Источники:
- https://www.vedomosti.ru/economics/articles/2018/11/29/787981-gosudarstvo
- https://www.kommersant.ru/doc/3814604
- http://www.tadviser.ru/index.php/Статья:Национальная_система_управления_данными_(НСУД)
- http://www.tadviser.ru/index.php/Статья:Импортозамещение_программного_обеспечения_в_госсекторе
- https://bigdataschool.ru/courses/big-data-analytics-for-executives