Интервью для TAdviser: «Современная MDM-система – это расширенная функциональность и гибкость в настройке»

В эпоху цифровой трансформации данные – важнейший стратегический актив компании: все управленческие решения принимаются на основе аналитики данных, вся операционная деятельность ведется с применением информационных систем, обрабатывающих данные. Крайне важно, чтобы в основе этой работы лежали качественные мастер-данные. Современные MDM-системы (Master Data Management) выходят за рамки классических функций и предоставляют множество дополнительных возможностей. Об этом рассказывает директор Департамента систем управления данными БФТ-Холдинга, владелец продукта «БФТ.ЕНСИ» Максим Зацепин.

Максим, как компании сделать так, чтобы управление данными стало реальным конкурентным преимуществом? С чего нужно начинать?

Начинать этот процесс, безусловно, стоит с основы – то есть с нормативно-справочной информации (НСИ). Под НСИ, или мастер-данными, мы понимаем весь объем справочников и классификаторов, которые применяются в ключевых бизнес-процессах и системах компании.

Представьте себе, что в базе данных одна и та же деталь заведена под разными наименованиями, например кириллицей и латиницей, и таких дублирующихся записей в системе – тысячи. В этом случае, какими бы мощными аналитическими инструментами вы ни запаслись, все отчеты окажутся недостоверными. И нет никакой гарантии, что после очередных закупок на вашем складе не окажется двух одинаковых партий этих деталей, которые вам в таком количестве не нужны и будут только занимать место на стеллаже.

Эта проблема особенно остро стоит перед крупными компаниями, где различные подразделения или распределенные филиалы ведут деятельность в разных, не согласованных между собой системах. Один сотрудник указывает вес товара в граммах, другой в килограммах, кто-то заполняет все позиции в карточке объекта, кто-то выборочно, а кто-то печатает с ошибками – в итоге ваши информационные системы вместо наведения порядка только увеличивают хаос в данных.

Устранить эти проблемы помогает MDM-система. В ИТ-контуре компании она отвечает за централизацию мастер-данных, стандартизацию, обогащение и проверки качества, а значит, позволяет достичь необходимого уровня качества данных – актуальности, непротиворечивости и полноты. По сути, она позволяет остальным информационным системам говорить между собой на одном языке и действовать согласованно. И на этой основе уже можно выстраивать дальнейшую работу с данными в ключевых бизнес-процессах.

MDM-систем на рынке достаточно много. Насколько сильно отличается их функциональность, и что влияет на выбор клиентов?

Любая MDM-система должна отвечать своей главной цели – ведению НСИ и формированию по заданным правилам эталонных («золотых») записей, которыми она потом «делится» с другими системами. Для этого в ней в том или ином виде присутствуют инструменты для сбора данных из различных внутренних и внешних источников, их очистки и обогащения, стандартизации и классификации, выявления дубликатов, хранения и поиска, аналитики, поддержки маршрутов согласования изменений.

А дальше начинаются нюансы: в какой мере будут автоматизированы процессы в системе? Может ли она, например, взять на себя основные процедуры нормализации данных, или для этого по-прежнему потребуется ручной труд эксперта? С какими источниками данных из коробки умеет работать система, чтобы поддерживать внешние справочники и классификаторы в актуальном состоянии? Может ли она адаптироваться к специфическим бизнес-процессам компании, или, наоборот, компании придется подстраиваться под нее? Со всеми ли необходимыми источниками данных система может легко интегрироваться? Может ли она обрабатывать большие объемы данных?

Поскольку роль MDM-систем в ИТ-инфраструктуре компаний растет, то и подобных требований к ним появляется всё больше. Взять хотя бы технологии искусственного интеллекта, которые уже находят применение при решении множества задач, связанных с обработкой данных и аналитикой. Чем больше подобных возможностей поддерживает MDM-система, тем больше шансов на то, что ее выберет клиент.

Какие функции MDM-систем, помимо базовых, сегодня наиболее важны?

В первую очередь, важен комплексный платформенный подход к ведению НСИ, закрывающий большинство потребностей и учитывающий специфику компании. Среди наиболее востребованных функций можно назвать описание НСИ на уровне метаданных, обмен данными с внешними и внутренними источниками, автоматизированную нормализацию и управление качеством данных, управление заявками на изменение данных, проектирование бизнес-процессов (в нотации BPMN) и сценариев обработки данных, возможности гибкой настройки MDM-системы.

В качестве примера такого комплексного подхода можно привести функциональность нашей MDM-системы «БФТ.ЕНСИ», реализованную для автоматизации процессов ведения НСИ. В MDM-системе доступно формирование новых объектов НСИ в соответствии с паспортом объекта по шаблону: в программе преднастроены атрибуты и правила заполнения карточек объектов. Например, при заведении нового контрагента система автоматически переносит данные из источника согласно шаблону, проверяет заполнение всех обязательных полей (наименование контрагента, ИНН, юридический адрес) и соответствие форматов данных.

MDM-система интегрируется с внутренними (ERP, CRM, Excel-файлами и т.д.) и внешними (федеральными реестрами, государственными базами данных и т.д.) источниками, поддерживает массовую загрузку данных из них, может автоматически верифицировать данные, проверять актуальность реквизитов и по необходимости их обновлять. После формирования «золотой записи» MDM синхронизирует ее с другими корпоративными системами.

Для поддержки централизованной процедуры изменения данных объектов НСИ система предлагает процессы, которые можно настроить в соответствии с правилами согласования, принятыми в компании.

Для нормализации данных, которая особенно актуальна для компаний, решающих задачи объединения нескольких разнородных учетных систем или миграции данных из старых систем в новую, система предоставляет возможности выполнить настройки для автоматического устранения дублей и приведения данных к единому стандарту.

Для обеспечения качества данных с помощью инструментов системы «БФТ.ЕНСИ» можно оперативно выполнять проверки на полноту, уникальность, актуальность данных, корректность связей между объектами, а также формировать отчеты о количестве дублей, неполных записей и о других нарушениях. Внесение исправлений в данные может выполняться в автоматизированном режиме.

Почему вообще компании заинтересованы в расширении функциональности MDM? Не делает ли это систему слишком сложной в использовании и администрировании?

Современный бизнес в целом стремится консолидировать свои информационные ресурсы, переходить от нескольких, зачастую функционально пересекающихся, систем к одному платформенному решению. Сотрудникам гораздо удобнее использовать все возможности из «одного окна», не переходя из одной системы в другую для решения смежных задач. Комплексный продукт получает поддержку и обновления от одного проверенного вендора.

Что касается настроек и администрирования – благодаря подходу low-code, реализованному в передовых MDM-системах, добавлять новые функциональные модули и источники данных, адаптировать их под свои нужды, настраивать правила обработки данных и маршруты согласований, формировать отчеты становится намного проще. Несмотря на то, что MDM-системы наращивают функциональность, с помощью low-code они сохраняют гибкость.

Функциональность MDM наиболее востребована среди крупных компаний со сложными бизнес-процессами и территориально распределенной структурой. Готовы ли российские решения поддерживать нужный уровень производительности и масштабируемости, чтобы в централизованной системе могли одновременно работать тысячи пользователей из филиалов, расположенных по всей стране?

Безусловно, на российском рынке присутствуют зрелые решения класса MDM, предназначенные для сегмента Enterprise и крупных государственных заказчиков вплоть до уровня министерства. В частности, система «БФТ.ЕНСИ» готова к любым требованиям по масштабируемости и производительности. За счет гибкой архитектуры, использования современных технологий и оптимизации процессов обработки данных она адаптируется под специфику компании, выдерживает высокие нагрузки и способна справиться с большими объемами информации.

Так, в нее встроен ETL-инструмент, который позволяет быстро загружать и преобразовывать данные из внешних источников, при этом обеспечивая их актуальность в режиме реального времени, что критично для высоконагруженных систем. Для ускорения обработки данных используются алгоритмы машинного обучения и генеративного ИИ: они задействованы, например, для задач нормализации данных, дедупликации и других.

Мы изначально проектировали систему так, чтобы она могла адаптироваться под рост бизнеса, работать в распределенных холдингах, входить в технологический стек централизованных государственных информационных систем. Среди наших заказчиков – Социальный фонд России (платформа Социальное казначейство), Росреестр (подсистема «Витрина данных ЕГРН»), Минздрав России (Федеральный реестр нормативно-справочной информации в сфере здравоохранения ЕГИСЗ) и многие другие. Эти проекты действительно впечатляют своими масштабами: в системах, построенных на базе нашего решения, содержатся сотни миллионов записей, более тысячи справочников и классификаторов, с ними могут работать единовременно более тысячи пользователей, интегрироваться тысячи внешних систем – потребителей НСИ.

Какие тенденции в области MDM-систем оказывают наиболее сильное влияние на их развитие?

Здесь я не буду оригинальным: главная тенденция – это расширение возможностей искусственного интеллекта в самых разных областях работы с данными. Это и процесс классификации и нормализации справочника МТР, а также поиска аналогов, и деятельность службы ведения НСИ, и интеллектуальный поиск НСИ.

Внедрение ИИ позволяет выводить MDM-решение на новый уровень производительности и эффективности использования.

Источник: TAdviser