Головна Журнал Що означає МДМ. Що таке «система управління майстер-даними» і навіщо вона потрібна

Що означає МДМ. Що таке «система управління майстер-даними» і навіщо вона потрібна

Постійно стикаємося з тим, що в області MDM (Master Data Management) катастрофічно відсутні зрозумілі вступні матеріали, що дозволяють швидко розібратися, що це, навіщо і чому це важливо. Спробуємо це в міру сил виправити та пояснити мовою бізнесу.

У цій галузі поки що серйозний дефіцит визначеності, і навіть Вікіпедія, як не дивно, не цілком впевнена, що є що. Тому пояснюватимемо своїми словами і «на пальцях», з прикладами.

Що є що

Отже, всі дані, якими оперують сучасні інформаційні системи, можна розділити на нормативно-довідкову інформацію, майстер-дані та транзакційні дані.

Нормативно-довідкова інформація (НСІ) або довідники та класифікатори — дозволяють нам структурувати навколишній світ з метою його аналізу. Як правило, довідники та класифікатори будуються у вигляді списків та дерев. Наприклад, ми розподіляємо всі товари за товарними групами для того, щоб ними було легше керувати. У світовій практиці цю частину класифікують як Reference Data, з відповідним класом додатків та процесів – Reference Data Management.

Майстер-дані зазвичай відбивають об'єкти реального світу, та його основні властивості, наприклад: клієнтів, товари, людей, офіси, транспортні засоби. Їхня ключова відмінність від НСІ в тому, що НСІ – це атрибути, властивості, списки та інші площини класифікації, але об'єкти, що описуються НСІ, як правило, не існують у реальному житті. Так, модель автомобіля - це елемент НСІ, а ось конкретний автомобіль з його властивостями - елемент майстер-даних.

Транзакційні дані – відображають наші дії з об'єктами світу (читай – об'єктами майстер-даних), події та взаємодії. Ми в момент T відвантажили клієнту А товар Б у кількості Х і за ціною Y. А потім у момент T1 отримали з клієнта А платіж на суму Z, ці запис і будуть транзакційними даними.

Якщо подивитися на ці групи, то побачимо деяку ієрархію, відбиту малюнку. НСІ використовується для структурування майстер-даних та транзакційних даних. Майстерні дані визначають структуру транзакційних даних. І лише транзакційні дані є кінцевим результатом ланцюжка.

Таким чином, НСІ структурують як майстер-дані, так і безпосередньо транзакційні дані. Майстер-дані структурують транзакційні дані. У результаті наші аналітичні можливості щодо транзакційних даних прямо залежать від того, наскільки придатний для наших цілей «каркас» із НСІ та майстер-даних нам вдалося побудувати.

Звичайно, кожен з видів даних має свої особливості, які ми повинні розглянути докладно.

Особливості НСІ

Ключовою особливістю НСИ є відносна незмінність, тобто. НСІ вибудовуються спочатку виходячи з бізнес-цілей або стійкої об'єктивної реальності світу (наприклад, довідник організаційних форм або моделей авто). Зміни у НСІ зазвичай відбуваються відповідно до певної процедури, ведення НСІ покладається на конкретний підрозділ. Будь-яка зміна має обов'язково пройти за певним процесом узгодження, що гарантує цілісність НДІ.

Джерелами змін у НДІ є зміни у навколишній дійсності, наприклад, іноді з'являються нові країни чи валюти. Або, якщо йдеться про довідники, побудовані навколо бізнес-цілей, — зміни, пов'язані зі змінами в бізнес-цілях, обліковій політиці, розподілі відповідальності за товарними групами тощо.

Фактично, НСІ формують базові площини аналітики, внаслідок чого склад і структура НСІ може бути досить складною, у тому числі одні довідники можуть використовуватися в інших як атрибути, формуючи складні структури, що реалізують безліч аналітичних площин. Наприклад, для цілей маркетингу, виробництва, управління запасами та фінансового обліку можуть застосовуватися зовсім різні угруповання товарних позицій та різні набори ознак.

При достатній централізації управління НСІ система довідників зазвичай стабільна і не схильна до «зашумлення». Однак, у компаніях з недостатньо інтегрованими додатками ми спостерігаємо одну й ту саму біду: НСІ нерідко будуються окремо в рамках кожного додатка, виходячи з «локальних» бізнес-цілей, що забезпечуються цим додатком. Через війну породжуються «паралельні» набори НСИ, не зведені у єдину систему, що ускладнює формування аналітичних масивів.

В ідеалі управління НДІ має бути централізоване. Таким чином у складі ІТ-рішення з'являється система, що забезпечує технічну та організаційну основу для правління НСІ, по відношенню до якої всі інші додатки є клієнтами односторонньої синхронізації НСІ - з RDM в додатки.

Особливості майстер-даних

Майстер-дані «рухливіші»: нові клієнти, нові товари, нові люди – весь цей рух прямо походить з життя компанії.

Найважливішою особливістю майстер-даних є те, що саме тут компанія накопичує знання про предмет своєї роботи. Вся інформація, що з'являється протягом певного клієнта повинна господарсько складатися, структуруватися і оновлюватися, включаючи всю історію змін. Те саме стосується будь-яких майстер-даних. Не менш важливо те, що майстер-дані визначають так само відносини між різними сутностями. Що є філією чого, хто є постачальником яких товарних груп, які транспортні засоби належать яким філіям тощо.

Однак ступінь контролю за змінами майстер-даних суттєво нижчий, бо записи та їх оновлення породжуються в різних підрозділах, у різний час, вноситься різними людьми, а часто ще й у різних системах, що складають ІТ-ландшафт сучасної компанії. У результаті нерідко в кожній системі зберігається лише якась частина інформації про одну й ту саму сутність, у кожній системі їй надається власний ідентифікатор. У результаті формування комплексної аналітичної картини ускладнюється, а особливо запущених випадках стає і зовсім неможливим.

Внаслідок цього майстер-дані сильно схильні до «зашумлення» внаслідок помилок і створення дублюючих записів. Як правило, з цим борються організаційними заходами, правилами типу «не заводити товарну позицію якщо вона вже є» або «перед тим як завести клієнта – провести пошук по поточній клієнтській базі». Але коли розкиданість за прикладними системами накладається на різноманіття написань і описів, але це все межі людської уваги і старанності – то ніякі оргмери не допомагають.

Результатом «зашумлення» є втрата якості майстер-даних, яка спричиняє руйнування аналітики, бо яка може бути аналітика якщо транзакції щодо одного реального клієнта прив'язані до трьох різних клієнтських записів, зроблених у різний час у різних системах різними людьми?

Великі компанії з великою історією та складною ІТ-інфраструктурою запросто можуть мати у своїх системах 15..20 млн клієнтських записів про юросіб у той час як всього юросіб у Росії менше 5 млн. І це цілком життєвий випадок. Про якісну клієнтську аналітику говорити тут уже не доводиться.

Інший приклад. Дуже схильні до «зашумлення» товарні каталоги. Через відсутність єдиного унікального ідентифікатора та різноманітності написань нерідко оператор не в змозі співвіднести нові товари з уже врахованими в системі. В результаті позиція, що пилиться на складі, буде ще раз закуплена тільки тому, що складським залишкам відповідає одна картка товару, а в проектних специфікаціях - інша, хоча фізично - це один і той же товар.

Особливо слід зазначити, що більшість прикладних систем не містить в собі скільки ефективних механізмів управління якістю цих даних, обмежуючись тривіальним пошуком по підрядку, сподіваючись на сумлінність оператора і його знання прикладної області. Тому проблема якості майстер-даних зазвичай постає тоді, коли спотворення, що вносяться, і неадекватність аналітики досягають вражаючих розмірів і видно, що називається, неозброєним оком.

Особливості транзакційних даних

Транзакційні дані є найбільш динамічними з усіх перелічених типів і по суті породжуються прозоро для більшості операторів у ході зрозумілих дій на кшталт «відвантажити товар», «завантажити витяг з банку». Як правило, кожен елемент транзакційних даних містить деяку кількість посилань на записи майстер-даних різних видів плюс дату і ряд чисел, що характеризують транзакцію.

Наприклад, мінімальний елемент транзакційних даних, що породжуються відвантаженням, складатиметься з посилання на клієнта, посилання на товарну позицію, кількості та ціни. Насправді транзакційні дані мають трохи складнішу структуру, так, наприклад, є накладна та відповідний елемент даних із зазначенням контрагента та дати, а є її рядки, кожна з яких містить товарну позицію, кількість та ціну. Проте для цілей аналізу кількість транзакційних записів дорівнюватиме кількості рядків у накладній, а сам запис, відповідний накладній, — не перестає бути транзакційними даними.

Слід зазначити, що всілякі облікові регістри, що містять, наприклад, поточні залишки – по суті не є транзакційними даними, а різновидом аналітичного узагальнення. Просто це узагальнення технічними засобами підтримується постійно актуальним і має на меті оптимізацію продуктивності. Важливо те, що воно будь-якої миті може бути перераховано з транзакційних даних і в цьому його принципова відмінність – воно вторинне.

Важливо те, що транзакційні дані зазвичай зачіпають інтереси зовнішніх контрагентів, і через це немає особливих проблем з контролем їх якості: наприклад, якщо оператор завдав відвантаження - це позначиться на балансі з контрагентом, призведе до різночитань, звірки і помилка буде скоригована. Таким чином, взаємний контроль між взаємодіючими контрагентами разом з аналітичними інструментами та бізнес-практикою, що склалася, забезпечують порівняно високу якість транзакційних даних.

Чому майстер-дані потребують особливого підходу?

Визначившись із поняттями та розглянувши особливості типів даних, ми впритул підійшли до питання: чому ж управління майстер-даними виділяється в окрему функцію в сучасних ІТ-архітектурах? До того є кілька причин:

Вузька функціональна спрямованість програм часто призводить до того, що кожен додаток оперує своїм набором атрибутів. Колл-центр не дзвонить на адресу офісу, доставка не привозить товари на емейл. Інакше висловлюючись, повний набір інформації, т.зв. "майстер-запис" для кожного додатку надмірний. Крім того, у великих організаціях різні прикладні системи будуються під різні бізнес-мети і нерідко оперують навіть різними НСІ. Розробники та експлуатанти функціональних додатків просто не мають потреби в «чужих» майстер-даних та НСІ в рамках своїх цілей, і вся ця проблематика в результаті обрушується на системи високорівневої бізнес-аналітики, в яких майстер-дані та НСІ зводяться з тим чи іншим успіхом . І про проблеми, що виникають у цій точці, громадяни, змушені їх вирішувати можуть говорити багато, квітчасто і химерно, але як правило не дуже літературно.
Специфіка алгоритмів роботи з майстер-даними. Парадокс у цьому, що ефективне управління мастер-данными вимагає цілого спектра підходів, які у рамках прикладних систем зазвичай увагою розробників не розпещені. Так, щоб уникати дублювання записів необхідні дуже гнучкі та ефективні механізми пошуку та порівняння, складні алгоритми нормалізації-валідації-співставлення. При цьому з погляду цих алгоритмів керування різними видами майстер-даних майже не відрізняється між собою. Загалом все одно товарне це дерево, список транспортних засобів, профілі клієнтів або особисті картки співробітників. Підхід не змінюється, він простий: вичищати помилки та друкарські помилки, відловлювати і припиняти дублі, максимально доповнювати та актуалізувати, зберігати всю історію змін, виділяти «сумнівні» випадки для обробки аналітиками (дата-стюардами).

Таким чином і з'являється в ІТ-ландшафті окремий елемент - як окрема функція, ІТ-сервіс, який «диригує» всією сукупністю майстер-даних компанії, забезпечуючи всі функціональні програми єдиними, цілісними, актуальними та повними майстер-даними. У більшості випадків взаємодія між прикладними системами та MDM відбувається через шину даних, повідомлення або SOAP/REST API.

Парадокс у тому, що будь-яка компанія, яка намагається побудувати високорівневу аналітику, автоматично приходить до неявного формування майстер-даних навіть у тому випадку, якщо вона використовує ETL-процедури для «перевантаження» даних з декількох облікових систем в одну аналітичну, бо якісна аналітика принципово неможлива без якісних майстер-даних. Питання лише в тому, наскільки розвинені алгоритми зіставлення використовують ETL-процес, якої якості майстер-даний виходять в цільовій аналітичній системі.

Таким чином, обумовлена специфікою майстер-даних неможливість дійсно якісно вирішити завдання управління ними в рамках окремої прикладної системи, помножена на велику кількість прикладних систем, породжує окремий домен ІТ – управління майстер-даними.

Що таке MDM та які вони бувають?

Отже, управління майстер-даними або MDM викристалізовується як окрема галузь знань та клас продуктів. Однак, в англомовній термінології, що склалася, це загальний клас продуктів і рішень, до якого включається, зокрема, ряд прикладних рішень і пов'язаних з ними бізнес-процесів:

Немає сумнівів, що за відомого кохання англомовного світу до структурування дійсності, спеціалізації та акронімів можна розкопати ще добрий десяток вузьких прикладних систем, які по суті реалізують функціонал управління майстер-даними в одній конкретній вузькій області.

Ринок MDM рішень, що формується сьогодні представлений великою кількістю компаній, що пропонують рішення дуже різної якості. Усі вендори «першого ешелону» позначили наявність у своєму портфелі MDM рішень або окремо, або у складі своїх систем. Однак, як і було сказано, більшість з них зосереджена на іншому функціоналі, тому якість реалізації специфічного MDM функціоналу бажає кращого. У той же час безліч невеликих, але більш сфокусованих на проблематиці MDM компаній пропонує рішення суттєво більш функціональні.

Чи потрібний мені МДМ?

Отже, в якому випадку Вам безперечно варто задуматися над впровадженням MDM у свою ІТ-архітектуру? У першому наближенні критерії такі:

Останнє, що хотілося б відзначити у цьому розділі – це те, що немає кращого моменту для впровадження МДМ, ніж момент впровадження нових функціональних ІТ-систем або міграції з одних на інші. Адже процес впровадження передбачає «очищення» накопичених даних та ув'язування систем між собою. Поєднуючи ці речі, ми одним пострілом вбиваємо двох зайців: підвищуємо якість даних у новій системі і одночасно зберігаємо наступність зі старою, адже MDM-система якраз і зшиває їх між собою.

Куди котиться MDM?

Чого слід чекати від цього напряму? Який вектор розвитку? Вважаємо, що актуальними будуть наступні тренди:

Висновок

Ми сподіваємося, що цей матеріал дав уявлення про те, що таке майстер-дані, що таке системи керування ними і навіщо вони потрібні.

Визначено, для досить великих організацій зі складним ІТ-ландшафтом MDM є необхідним елементом, що дозволяє «склеїти» воєдино і зробити максимально корисними величезні, але сильно фрагментовані дані, спростити архітектуру, радикально знизити трудомісткість формування бізнес-аналітики та одночасно суттєво покращити її якість.

це перевірений та дієвий метод корекції захисної (адаптаційної) системи на рівні керуючих центрів головного мозку. Нормалізація стану адаптаційної системи супроводжується перебудовою діяльності всього організму, зокрема, покращується якість роботи органів і тканин, які мають відхилення від норми або уражені патологічним процесом. В результаті впливу слабким електричним сигналом з певними параметрами на структури головного мозку вибірково активуються різні ділянки нейроендокринної системи, що змушує організм застосовувати внутрішні резерви, мобілізує імунну систему.

Метод був відкритий групою російських учених у 80-х роках XX століття, але доопрацьований, апробований та впроваджений у клінічну практику у Європі. Методика отримала позитивні відгуки від провідних медичних центрів, як у Росії, і там. Метод був використаний для лікування більш ніж 200 тисяч хворих, у тому числі у дитячій практиці. На сьогоднішній день кабінети МДМ-терапії за методом професора В.Павлова успішно працюють в Австрії, Німеччині, Греції, Чехії та Швейцарії. У Москві перший кабінет МДМ-терапії відкрився у клініці «Сімейна» (медичний центр «Серпухівська»). Наразі пацієнти, які бажають скористатися цим високоефективним немедикаментозним методом, отримали можливість пройти курс лікування, не виїжджаючи за кордон.

Як відбувається процедура:

Сеанси мезодінцефальної модуляції проводяться з використанням комп'ютерного комплексу МДМ-2000/1, виробництва ZAT а.д., Чеська республіка. Апарат МДМ-2000/1зареєстрований у РФ і внесений до Державного реєстру виробів медичного призначення та медичної техніки (Реєстраційне посвідчення ФС № 2004/1128 з терміном до 22.01.2011 року), а також має санітарно-епідеміологічний висновок застосування (ліцензія № 77.94.8. 007272.12.04 від 28.12.2004 р.).

Процедура проведення мезодіненцефальної модуляції проста і безболісна: на голову пацієнта накладається пара лобово-потиличних електродів, через які подаються спеціально підібрані терапевтичні імпульси струму, що змінюються в часі за заздалегідь заданою програмою. Параметри електричних сигналів запрограмовані так, що негативна дія на організм повністю виключена.

Процедура триває 30 хвилин, стандартний лікувальний курс складається із 13 процедур (щодня протягом 10 днів)

Необхідна попередня консультація та обстеження у лікаря спеціаліста МДМ – терапії. У нашій клініці всі обстеження та саму процедуру проводять дипломовані фахівці, які мають великий досвід роботи та пройшли спеціалізацію за кордоном.

Показання до МДМ-терапії

Протипоказання до МДМ-терапії

наявність металевих сторонніх тіл у тканинах голови;
інтракраніальна геморагія; небезпека інтракраніальної кровотечі;
шизофренія;
епілепсія;
гострий психоз із психомоторним збудженням;
захворювання шкіри в місці накладання електродів на лобі та потилиці.

Докладніше про метод Мезодіенцефальної модуляції (МДМ-терапії)

Мезодіенцефальна модуляція або МДМ-терапіявідноситься до фізіотерапевтичним методам,Проте значно перевершує всі відомі методи лікувального ефекту. Її основою є слабкі, але складні структурою електричні сигнали, які вибірково впливаючи на структури мозку, активуючи роботу центрів управління захисної системою. Метод мезодіенцефальної модуляціїбазується на попередніх дослідженнях в галузі лікувальних транскраніальних (через покрив черепа) електричних стимуляцій структур головного мозку. Вперше транскраніальна терапія була здійснена у хворих у 1902 році. З того часу в практичній медицині застосовувалися різні модифікації апаратів, в яких використовувалися різні частотні та інші характеристики електричних сигналів. Найбільш відомими в Росії є електросон, електронаркоз та апарати для ТЕС-терапії. Більш ніж за 100 років клінічного використання накопичено величезний матеріал, що дозволяє насамперед визначити рамки параметрів електричного струму, не надають шкідливого на організм людини, але що покращують перебіг багатьох захворювань.

На відміну від своїх попередників метод мезодіенцефальної модуляції, зосередивши вплив на підкірково-стовбурових відділах мозку (мезодіенцефальної зоні), зумів досягти не тільки аналгізуючого ефекту, а добився вибіркової активації основних регуляторних систем - гіпоталамо-гіпофізарної, надниркової, опіоїдної та ін. Відповідно, полярність електродів та інші показники суттєво відрізняються від попередніх методик.

Як новий напрямок мезодіенцефальна модуляціявиникла у середині 1980-х років з урахуванням Центру невідкладної кардіології НДІ СП ім. Н.В. Скліфосовського. Тестуючи прилад для електрознеболення, розроблений Інститутом фізіології ім. І.П. Павлова РАН, група вчених на чолі з В.А.Павловим виявила, що аналгезуючий ефект при електростимуляції є не основним. Було виявлено, що вплив на мезодінцефальну зону слабким електричним сигналом з певними параметрами призводить до викиду в кров біологічно активних речовин. опіоїдних пептидів (зокрема, бета-ендорфіну - "гормону радості"), гормонів гіпофіза та інсуліну, що знижують вираженість стрес-реакцій та підвищують адаптаційні властивості організму. Тобто механізм дії наступний: в результаті стресової для організму ситуації (травма, інфекція, алергія тощо) розривається зв'язок між центральною та периферичною нейрогуморальною регуляцією органів, що у свою чергу призводить до включення власного ектопічного ритму пошкодженого органу та виведення його з-під контролю центральної нервової системи. Мезодіенцефальна модуляція дозволяє досягти виборчої активації регуляторних структур головного мозку, відбувається викид гормонів, які нормалізують діяльність органів та сприяють відновленню повноцінної функціональної активності.

Подальші розробки параметрів електросигналів, які проводилися під керівництвом професора В.А.Павлова на базі європейських наукових центрів, дозволили досягти суттєвого посилення цього позитивного ефекту. Підсумком майже 30-річної наукової роботи став комп'ютерний комплекс МДМ 2000/1. Розроблені фахівцями програми для лікування різних видів патологій дозволяють отримати у хворих яскраво виражені клініко-біологічні ефекти:

Запис на прийом до лікаря фізіотерапевта

Обов'язково пройдіть консультацію кваліфікованого спеціаліста у клініці «Сімейна». Ця послуга надається не у всіх філіях, уточнюйте більш детальну інформацію у адміністраторів

(Клік по картинці веде всередину публікації)

Розвиваючись, організації впроваджують дедалі більше інформаційних систем різних напрямів: бухгалтерський облік, управління персоналом, управління складом etc. Системи живуть і розвиваються незалежно один від одного до того самого моменту, як компанії не потрібно поглянути на свої дані повністю. Обсяги даних вже досягають критичної точки і з'ясовується, що порівняти та порівняти дані вручну стає просто неможливо. Рішення засновані на суперечливих та невивірених даних ведуть до управлінських помилок, а дублі та неактуальність даних до невірних бізнес-рішень.

Звичайно ж проблема описана вище не нова і сьогодні ми обговоримо класичний спосіб вирішення – систему управління майстер-даними.

(клікабельно)

Типи корпоративних даних: що таке довідкові та транзакційні дані

Щоб розібратися, чим є і не є майстер-дані, розберемо основні типи корпоративних даних.

(взято звідси)

Неструктуровані дані- текст, пошта, та інші дані, які не мають формально визначеної та описаної структури.

Напівструктуровані- дані не мають певної схеми (або мають змінну структуру), але мають формальний опис у вигляді тегів і/або певних маркерів. XML - приклад напівструктурованих даних.

Структуровані (транзакційні) дані- Дані мають формально певну схему.

Метадані- це дані, що описують інші дані, наприклад, схема бази даних клієнтів, конфігураційний файл або шаблон звіту.

Майстер-дані- це дані, що містять ключову інформацію про бізнес, у тому числі про клієнтів, про продукти, про працівників, про технології та матеріали. p align="justify"> Кожна з цих груп може розділятися на кілька предметних областей: в категорію люди входять клієнт, продавець, постачальник. Також може мати набір правил валідації, яким мають задовольняти дані.

Приклад, загальної структури майстер-даних та валідаційних правил (клікабельно)

Навіщо воно потрібне?

Історично багато систем зберігання, аналізу та візуалізації даних розвивалися паралельно і не сумісні між собою. У міру зростання компанії інтеграція даних стає все більш важливим і в багатьох випадках критичним завданням, згідно Microsoft вже компанії середнього розміру відчувають на собі наслідки роботи з різнорідними даними.
Таким чином, одним із завдань МДМ-систем є синхронізація даних, що спрощує вирішення супутніх завдань, як підготовка фінансової звітності.

МДМ-система - це один із наріжних каменів в архітектурі бізнесу разом з ERP та BI системами, що дозволяє системам аналітики та ведення бізнесу мати єдине уявлення про дані, незалежно від джерела та форми.

Розглянемо кілька класичних випадків, де необхідно використовувати та впроваджувати систему управління майстер-даними.

Зоопарк ІТ-систем та консолідована звітність

Нехай у компанії більше трьох систем зберігання-аналізу даних. Заповнюються вони та розвиваються незалежно один від одного. У якийсь момент з'являється необхідність зібрати консолідовану звітність та необхідно синхронізувати нормативно-довідкову інформацію. Наприклад, є компанія Ромашка з оборотом в 1М і є два записи «Общ.огр. Ромашка» і «ТОВ Ромашка» у різних системах з оборотом 400к і 600к, без інструментів синхронізації, система створення звітності зможе об'єднати записи.

Інтеграція систем

Нехай є кілька 1С систем у відділеннях компанії та рахунки, виставлені ТОВ «Ромашка» необхідно вивантажити та проаналізувати у CRM. Якщо CRM містить кілька дублів, наприклад Ромашка та Загальн. Огр. Ромашка, то постає питання до якої Ромашки в CRM ці рахунки прив'язати і чи є серед цих Ромашок потрібна?

Єдина база контрагентів

Насамперед створення єдиної бази необхідне, для якісної та достовірної інформації про контрагентів. Якщо клієнт, що вже підписав контракт, отримує додаткові N дзвінків про необхідність вислати вже відправлені документи (т.к. «Общ.огр. Ромашка» та «ТОВ Ромашка» - синтаксично різні компанії), це негативно відбивається на відносинах компанії.

Очищення та нормалізація даних

Описані вище випадки - це завдання з очищення та нормалізації даних (data cleaning and data quality).

Очищення та нормалізація даних – це безумовно інструменти, мета – це підвищення лояльності клієнта (e.g. уникаємо повторних дзвінків), створення звітності (впевненість у коректності аналітики) та збільшення швидкості виконання завдань (швидше проходимо цикл продажів).

Як правило, клієнт приходить до необхідності впровадження системи управління НДІ. Наприклад, необхідність оперативного контролю над діяльністю підприємства може вимагати збору консолідованої звітності, що у свою чергу призведе до необхідності синхронізації НСІ в ІТ-система, що у свою чергу вимагатиме впровадження системи управління НСІ.

Випадки з життя

Чотирнадцять 1С-ок

В одній компанії N було чотирнадцять 1С систем у філіях і ось одного разу їм довелося терміново надати звітність про свою діяльність до якоїсь палати. Відсутність єдиної звітності загрожувала суттєвими проблемами і ось M співробітників кілька тижнів разом зводили та вивіряли дані. А могли б просто фізично не встигнути.

Фури

Клієнт з Астрахані відправив фури замовнику в інший регіон, а забезпечення на шляху надавала компанія Х, яка не мала МДМ-системи і єдиної бази контрагентів. Під час подорожі фури проходили обслуговування у двох регіонах - і після закінчення поїздки компанія Х виставила рахунок клієнту по цих регіонах за стандартним прейскурантом без знижки за обсяг, оскільки клієнт був записаний у цих двох регіонах під трохи по-різному і система не зіставила імена. Підсумок - додаткові розгляди та погіршення ділових відносин.

Повторні дзвінки

Якось клієнту зателефонували шість (!) разів після того, як контракт був підписаний. Через подібну некомпетентність лояльність клієнта та контракт були під загрозою.

Методи вирішення

Розглянемо два найбільш популярні методи вирішення проблем, описаних вище.

Адміністративне рішення

Адміністративний підхід - спочатку вичистити вже наявні дублі в ІТ-системах, розробити систему кодувань, якими можна зіставити записи в довідниках різних ІТ-систем, і регламенти. Такий метод відносно простий, але має ряд недоліків – він не запобігатиме розсинхронізації НСІ в різних системах, а регламенти завжди можна обійти.

Впровадження MDM-системи

Технологічний підхід - використання системи, що забезпечує синхронізацію та єдине подання даних. Як правило, більшість великих компаній впроваджують різні версії MDM, коли ручна консолідація довідкової інформації та звітності стає неможливою, а впровадження будь-якої нової системи змушує змінювати регламент і кодування, тільки посилюючи хаос.

Безумовно, одноразове введення МДМ-системи не вирішить усі проблеми і в міру розвитку бізнесу, повинна розвиватися і МДМ-система, може навіть змінитися і сам тип МДМ системи (основні типи освітлені нижче), однак, як показує практика MDM, є оптимальним бізнес-рішенням подібних випадках.

Типи МДМ-систем

Ми розглянемо три основні типи MDM-систем - докладніше можна прочитати.

Централізована система

Вибирається одна IT система, це може бути як існуюча IT-система, так і окрема система управління НСІ. Довідкові дані в цій системі вважатимуться еталонними, вестимуться в ній і розсилатимуться в інші системи. При цьому створення та редагування довідкових даних в інших ІТ системах забороняється. Перевагами такого підходу є:

Простота застосування;
Простота підтримки актуальності та чистоти довідкових даних у всіх IT – системах, простота адміністрування та розмежування прав;
Актуальні та чисті довідкові дані у всіх ІТ-системах, що дозволяє будувати чисту локальну звітність в ІТ системах.

Але цей метод має ряд недоліків - в інших системах неможливо створювати та редагувати записи, визначені в центральній системі. Тобто змінюються внутрішні бізнес-процеси компанії, що часто є небажаним, а іноді й неприпустимим. Також система нестійка до обривів зв'язку і працездатність критично залежить від поточної доступності центральної системи.

Аналітична система

В аналітичній системі НСІ усі елементи НСІ створюються у клієнтських системах, звідки вирушають у систему НСІ, де з цих елементів формується запис довідника НСІ. Це дозволяє швидко впроваджувати систему, вносячи мінімальні зміни клієнтських систем.

Але так як НСІ в окремо взятій IT-системі ні з чим не синхронізується, то в самій IT-системі можуть бути дублі і звітність може розпливтися, тому побудова оперативної звітності утруднена (про локальну звітність також кажуть, що вона «брудна» - локальні записи НСІ можуть не відповідати записам у системі НСІ).

Гармонізована система

Ця система увібрала в себе найкраще з централізованої та аналітичної систем. Вона дозволяє заводити дані в IT-системах, а потім зіставляти з уже заведеними, вміє шукати потенційні дублі, вирішувати конфлікти, пов'язані з одночасною зміною тих самих даних у різних IT-системах, синхронізувати НСІ в IT-системах. Таким чином, не змінюються і не порушуються бізнес-процеси, мінімізуються ручна робота з підготовки звітності - тобто просто будується локальна звітність. Однак дані підхід є найбільш дорогим, трудомістким і вимагають серйозної експертизи для побудови, а також може вимагати модифікації клієнтських додатків.

Приклади реалізації MDM-систем

Прикладом аналітичної системи управління НСІ є Navicon SalesOut, а прикладом централізованої та гармонізованої – різні конфігурації Navicon MDM.

Індикатори необхідності впровадження МДМ-систем

Ключові: необхідна інтеграціярізних систем та єдина звітністьна основі цих даних.

Приватні причини застосування з прикладу з однією з клієнтів

Загальні індикатори, при яких варто задуматися про необхідність упорядкування НСІ, налаштування процесів MDM:

Насамперед це наявність чи плани щодо впровадження кількох ІТ-систем;
Потреби автоматизації наскрізних бізнес-процесів (тобто. процесів, у яких залучено кілька ІТ-систем) – потреба у інтеграції;
Потреба у консолідованій звітності (тобто у звітності, яка використовує дані з кількох ІТ-систем);
Розробка ІТ-стратегії. Багато компаній вважають за краще вирішувати проблеми з НСІ до появи. Чим довше довідкові дані велися в ІТ-системах незалежно один від одного, тим складніше буде в майбутньому їх звіряти, чистити, синхронізувати.

Висновки

Основні тези та висновки: синхронізація НСІ полегшує 1) впровадження нових інформаційних систем у IT інфраструктуру компанії; 2) інтеграцію існуючих систем; 3) обробку корпоративних даних; 4) скорочує трудовитрати на актуалізацію даних; 5) мінімізує ризики, пов'язані з некоректними даними. Впровадження виділеної системи управління НСІ не завжди є обов'язковим, але про проблеми, які можуть виникнути через розсинхронізацію НСІ, завжди варто пам'ятати при розвитку IT інфраструктури. Сайт

Історія

7 жовтня 2016 р. на позачергових загальних зборах акціонерів БІНБАНКу та МДМ Банку було затверджено схему юридичного об'єднання БІНБАНКу та МДМ Банку, відповідно до якої БІНБАНК приєднається до МДМ Банку, при цьому об'єднаний банк продовжить працювати під брендом БІНБАНКу (МДМ Банку) ). Процес юридичного об'єднання БІНБАНКу та МДМ Банку планується завершити до кінця 2016 року.

Власники та керівництво

Голова ради директорів – Олег В'югін, голова правління – Микола Шишханов.

Діяльність

ПАТ «МДМ Банк» надає повний спектр послуг ринку фінансових послуг, включаючи роздрібне банківське обслуговування, обслуговування малого та середнього бізнесу, корпоративні, лізингові та інвестиційні банківські послуги.

Оцінки рейтингових агенцій

Напишіть відгук про статтю "МДМ банк"

Примітки

Посилання

також

Уривок, що характеризує МДМ банк

- Так, я дуже радий Миколошці. Він здоровий?

Коли привели до князя Андрія Миколушку, який злякано дивився на батька, але не плакав, бо ніхто не плакав, князь Андрій поцілував його і, очевидно, не знав, що говорити з ним.
Коли Миколушку вели, княжна Мар'я підійшла ще раз до брата, поцілувала його і, не маючи сил утримуватися більше, заплакала.
Він пильно глянув на неї.
- Ти про Миколушку? - Сказав він.
Княжна Мар'я, плачучи, схвально нагнула голову.
– Марі, ти знаєш Єване… – але він раптом замовк.
- Що ти кажеш?
– Нічого. Не треба плакати тут, – сказав він, тим самим холодним поглядом дивлячись на неї.

Коли княжна Мар'я заплакала, він зрозумів, що вона плакала про те, що Миколка залишиться без батька. З великим зусиллям над собою він постарався повернутися назад у життя і перенісся на їхню точку зору.
«Так, їм це здається шкода! – подумав він. – А як це просто!»
«Птахи небесні ні сіють, ні жнуть, але ваш батько живить їх», – сказав він сам собі і хотів те саме сказати князівні. «Але ні, вони зрозуміють це по-своєму, вони не зрозуміють! Цього вони не можуть розуміти, що всі ці почуття, якими вони дорожать, всі наші, всі ці думки, які здаються нам такі важливі, що вони не потрібні. Ми не можемо розуміти одне одного». – І він замовк.

Маленькому синові князя Андрія було сім років. Він ледве вмів читати, нічого не знав. Він багато чого пережив після цього дня, набуваючи знань, спостережливості, досвідченості; але якби він володів тоді всіма цими після набутими здібностями, він не міг би краще, глибше зрозуміти все значення тієї сцени, яку він бачив між батьком, княжною Мар'єю та Наталкою, ніж він її зрозумів тепер. Він усе зрозумів і, не плачучи, вийшов із кімнати, мовчки підійшов до Наталки, що вийшла за ним, сором'язливо глянув на неї задуманими прекрасними очима; піднята рум'яна верхня губа його здригнулася, він притулився до неї головою і заплакав.
З цього дня він уникав Десаля, уникав графиню, що пестила його, або сидів один, або несміливо підходив до князівни Мар'ї і до Наташі, яку він, здавалося, полюбив ще більше своєї тітки, і тихо і сором'язливо пестився до них.
Княжна Мар'я, вийшовши від князя Андрія, цілком зрозуміла все те, що сказала їй обличчя Наташі. Вона більше не говорила з Наталкою про надію на порятунок його життя. Вона чергувалася з нею біля його дивана і не плакала більше, але безперестанку молилася, звертаючись душею до того вічного, незбагненного, якого присутність така відчутна була тепер над людиною, що вмирала.

Князь Андрій не тільки знав, що він помре, але відчував, що він вмирає, що вже помер наполовину. Він відчував свідомість відчуженості від усього земного та радісної та дивної легкості буття. Він, не кваплячись і не турбуючись, чекав того, що треба було йому. То грізне, вічне, невідоме і далеке, присутність якого він не переставав відчувати протягом усього свого життя, тепер для нього було близьке і - за тією дивною легкістю буття, яку він відчував, - майже зрозуміле і відчутне.
Раніше він боявся кінця. Він двічі відчув це страшне болісне почуття страху смерті, кінця, і тепер уже не розумів його.
Перший раз він відчув це почуття тоді, коли граната дзиґою крутилася перед ним і він дивився на стерні, на кущі, на небо і знав, що перед ним була смерть. Коли він опритомнів після рани і в душі його, миттєво, ніби звільнений від утримуючого його гніту життя, розпустилася ця квітка кохання, вічного, вільного, не залежного від цього життя, він уже не боявся смерті і не думав про неї.
Чим більше він, у ті часи страждальницької усамітнення і напівмавки, які він провів після своєї рани, вдумувався в новий, відкритий йому початок вічного кохання, тим більше він, сам не відчуваючи того, зрікався земного життя. Все, всіх любити, завжди жертвувати собою для любові, означало нікого не любити, означало не жити цим земним життям. І чим більше він переймався цим початком любові, тим більше він зрікався життя і тим досконаліше знищував ту страшну перешкоду, яка без любові стоїть між життям і смертю. Коли він, це спочатку, згадував про те, що йому треба було померти, він казав собі: ну що ж, тим краще.
Але після тієї ночі в Митищах, коли в напівбреді перед ним з'явилася та, яку він хотів, і коли він, притиснувши до своїх губ її руку, заплакав тихими, радісними сльозами, любов до однієї жінки непомітно закралася в його серці і знову прив'язала його до життя. І радісні та тривожні думки почали приходити йому. Згадуючи ту хвилину на перев'язувальному пункті, коли він побачив Курагіна, він тепер не міг повернутися до того почуття: його мучило питання про те, чи він живий? І він не смів спитати цього.

Які бувають дані

Перш ніж перейти безпосередньо до систем управління майстер-даними, давайте визначимо, які взагалі бувають дані.

Нижче наведено 5 ключових типів:

1. Метадані (Metadata);
2. Референс-дані (Reference data);
3. Майстер-дані (Master data);
4. Транзакційні дані (Transactional data);
5. Історичні дані (Historical data).

Метадані- Це дані про дані. Вони необхідні розуміння і визначення, якими даними оперує підприємство. Метадані визначають структури, типи даних, доступи до них і т.д. Існують різні схеми для опису метаданих. Наприклад, для опису структури документа XML може застосовуватися XSD-схема, для опису веб-сервісу - WSDL-схема.

Референс-дані- Це відносно рідко змінюються дані, які визначають значення конкретних сутностей, що використовуються при виконанні операцій у рамках всього підприємства. До таких сутностей найчастіше належать: валюти, країни, одиниці виміру, типи договорів/рахунків тощо.

Майстер-дані- Це базові дані, які визначають бізнес-сутності, з якими має справу підприємство. До таких бізнес-сутностей зазвичай належать (залежно від предметної галузевої спрямованості підприємства) клієнти, постачальники, продукція, послуги, договори, рахунки, пацієнти, громадяни тощо. Крім інформації безпосередньо про ту чи іншу майстер-сутність, у майстер-дані входять взаємозв'язки між цими сутностями та ієрархією. Наприклад, з погляду пошуку додаткових можливостей продажів, може бути дуже важливо виявляти явні та неявні взаємозв'язки між фізичними особами. Майстер-дані поширюються по всьому підприємству та беруть участь у всіх бізнес-процесах. Зазвичай майстер-дані сприймаються як ключовий нематеріальний актив підприємства, т.к. від їхньої якості та повноти залежить ефективність його роботи. У Росії її часто замість терміна «майстер-дані» використовують термін «нормативно-довідкова інформація».

Транзакційні дані- Це дані, які утворилися в результати виконання підприємством будь-яких бізнес-транзакцій. Наприклад, для комерційного підприємства: продажу товарів та послуг, закупівлі, надходження/списання коштів, надходження складу і т.п. Зазвичай такі дані базуються на системі управління ресурсами підприємства (ERP) чи інших галузевих системах. Природно, транзакційні системи широко використовують майстер-дані під час виконання транзакцій.

Історичні дані- Це дані, які включають історичні транзакційні і майстер-дані. Найчастіше такі дані акумулюються в ODS та DWH системах і служать для вирішення різних аналітичних завдань та підтримки прийняття управлінських рішень.

Системи управління майстер-даними

Перш ніж перейти до системи управління майстер-даними, визначимо, що таке управління майстер-даними взагалі.

Управління майстер-даними (Master Data Management, MDM) – дисципліна, яка працює з майстер-даними з метою створення «золотого запису», тобто цілісного та всебічного уявлення про майстер-сутність та взаємозв'язки, еталона майстер-даних, що використовуються всім підприємством , а іноді й між підприємствами спрощення обміну інформацією.

Спеціалізовані системи управління майстер даними (MDM-системи) автоматизують усі аспекти цього процесу і є «авторитетним» джерелом майстер-даних масштабу підприємства. Часто MDM-системи керують також і референс-даними.

Ситуація, коли MDM-система є єдиним джерелом майстер-даних, всі зміни вносяться в MDM-систему і тільки потім передаються в системи-споживачі, називається системою записів. Це ідеальна ситуація для управління майстер-даними. Однак у реальному житті все не так просто: MDM-система не завжди буде «системою записів». Через особливості бізнес-процесів конкретного підприємства, технічні складнощі конкретних систем тощо, доводиться створювати «копії» майстер-записів. Система, де міститься копія майстер-даних, називається «системою посилань». Щоб не втрачати керованості, система посилань обов'язково повинна знаходитися під управлінням і синхронізуватися з системою записів.

Три виміри MDM-систем

Розглянемо MDM-систему у трьох вимірах:

Зазвичай MDM-системи не впроваджуються «з наскоку», т.к. їх використання – це складний процес послідовних перетворень масштабу всього підприємства, від ведення розрізнених даних до створення цілісного всебічного уявлення про майстер-сутність. Тому використання MDM-систем виконується послідовно з поступовим наближенням до цільового результату у трьох зазначених вимірах.

Розглянемо докладніше ці виміри.

Домени

У контексті управління майстер-даними під доменом розуміється конкретна область майстер-даних. Найпоширеніші домени майстер-даних – це домен клієнтів та домен продуктів. У західній літературі склалися усталені терміни для управління майстер-даними в рамках цих доменів: Customer Data Integration (CDI) – для домену клієнтів та Product Information Management (PIM) – для домену продуктів.

До CDI традиційно ставляться як клієнти, а й організації чи фізичні особи, які можуть називатися по-різному залежно від галузі підприємства: клієнти, постачальники, банки, фонди, пацієнти, громадяни тощо.

До PIM традиційно ставляться: продукція, товари, матеріали, послуги, роботи та т.д.
Є багато спільного у підходах до управління майстер-даними CDI та PIM, але є також і багато відмінностей. Наприклад, при дедублікації клієнтських сутностей у більшості випадків виконується простий синтаксичний аналіз атрибутів сутностей та їх зіставлення на основі ймовірнісних алгоритмів, тоді як у продуктовому домені проводиться семантичний/онтологічний аналіз атрибутів з підключенням механізмів самонавчання. Крім того, в продуктовому домені у сутностей залежно від обраної категорії можуть сильно відрізнятися атрибути (наприклад, ноутбуки мають свій набір атрибутів, а пральні машинки – свій). Всі ці особливості різних доменів повинні підтримуватись MDM-системами.

Останнім часом має місце тенденція створення мультидоменних MDM-систем з можливістю гнучкого налаштування структури метаданих. Така гнучкість дає підприємству можливість описати майстер-дані безпосередньо під себе з урахуванням усіх особливостей і нюансів, але при цьому вимагає чимало часу та знань, щоб грамотно спроектувати та налаштувати таку систему. Також на ринку є системи з «жорсткою» структурою майстер-сутностей, які мають вже коректно налаштовані механізми, але використання такої системи можливе лише тими підприємствами, які зможуть підлаштуватися під неї. Зазвичай такі системи добре застосовні для вирішення завдання управління майстер-даними в рамках якоїсь вузької галузі. На мою думку, найперспективнішими є системи з гнучкою моделлю метаданих, але мають при цьому налаштовані для підприємств різних галузей моделі, які можна швидко переналаштовувати.

Методи використання

Методи використання MDM (Method of use) визначають те, навіщо MDM система використовуватиметься для підприємства. Іншими словами, хто буде споживачем майстер-даних (звісно, їх може бути кілька).

Основних методів використання три:

1. Аналітичний (Analytical)
2. Операційний (Operational)
3. Колективний (Collaborative)

Аналітичний метод використання підтримує бізнес-процеси та програми, які використовують майстер-дані переважно для аналізу ефективності бізнесу, надають необхідні звіти та виконують аналітичні функції. Часто це відбувається за допомогою взаємодії MDM з інструментами та продуктами BI. Зазвичай аналітична MDM-система працює з даними тільки в режимі читання, вона не змінює дані в системах-джерелах, але займається їх очищенням та збагаченням.

p align="justify"> Операційний метод використання дозволяє збирати, змінювати і використовувати майстер-дані в процесі виконання бізнес-транзакцій (операцій) і служить для підтримки семантичної узгодженості майстер-даних в рамках цих операцій усередині всіх операційних додатків. Фактично, у цьому випадку MDM функціонує як OLTP-система, яка відпрацьовує запити від інших операційних програм або користувачів. Робота в такому режимі часто вимагає побудови єдиного інтеграційного ландшафту з використанням принципів сервіс-орієнтованої архітектури (SOA) та застосування інструментарію сервісної шини підприємства (ESB). Ідеально, якщо такі інструменти або входять безпосередньо в MDM-систему, або є її продовженням (є вендори, які мають у своїй лінійці і MDM і ESB-рішення, глибоко інтегровані між собою).

Колективний метод використання дозволяє створювати майстер-сутності у випадках, коли потрібна колективна взаємодія між різними групами користувачів у процесі створення. Таке узгодження зазвичай має складні «розгалужені» бізнес-процеси, що складаються з різних автоматичних та ручних завдань. Ручні завдання виконуються різними спеціалістами по роботі з даними (дата-стюардами) у порядку, визначеному бізнес-процесом. Найчастіше колективний метод використання застосовується у продуктовому домені. Наприклад, при створенні нового продукту, коли є кілька відповідальних за введення різних даних, багато ручної роботи та фінальне узгодження. Важливо, щоб MDM система дозволяла налаштовувати довільні бізнес-процеси для швидкої підтримки бізнес-процесів конкретного підприємства.

Стилі застосування

Зазвичай виділяють три основні стилі застосування (implementation style):

1. Реєстровий (Registry);
2. Існуючий (coexistence);
3. Транзакційний (transactional).

Реєстровий стиль застосування передбачає створення джерела майстер-даних як «системи посилань» на нижчестоящі джерела даних. Реєстрова MDM містить лише ключові атрибути, необхідні для ідентифікації та зіставлення сутностей. Реєстрова MDM працює в режимі "тільки читання", дані вводяться в системах-джерелах і передаються в MDM для вирішення сутностей. Також у реєстровій MDM можуть зберігатися посилання на джерела неключових даних, але ці дані зазвичай в MDM не передаються. Реєстровий стиль застосування зазвичай застосовується у разі вибору операційного методу використання MDM (див. вище).

Існуючий стиль застосування передбачає наявність розподіленого введення даних у кількох джерелах (бізнес-додатках і MDM-системі). MDM-система в даному випадку може бути "системою записів" тільки для частини атрибутів. Тим не менш, у MDM-системі формується повноцінна майстер-сутність, зміни якої транслюються в інші системи (можливо, не всі). Існуючий стиль застосування досить простий і найчастіше застосовується як перший крок до наступного - транзакційного стилю, т.к. не вимагає глибокої переробки систем, що взаємодіють із MDM-системою.

Транзакційний стиль застосування передбачає створення повноцінної «системи записів», у якій зберігаються всі дані по майстер-сутностям. MDM-система у разі є «єдиним джерелом правди» всім систем-споживачів. Всі операції зі створення та обробки даних виконуються на рівні MDM-системи. Введення даних на рівні систем-споживачів заборонено. Такий підхід зазвичай досить складний застосування, т.к. вимагає суттєвої зміни бізнес-процесів та систем-передплатників.

Висновок

На практиці, вибір тієї чи іншої стратегії впровадження MDM визначається багатьма факторами: цілями підприємства в галузі управління майстер-даними, ступенем зрілості підприємства, ступенем готовності IT-інфраструктури, наявністю інвестицій на реалізацію проекту та багатьма іншими параметрами. Щоб визначитися зі стратегією впровадження, потрібно провести ретельний аналіз усіх цих факторів та скласти докладне техніко-економічне обґрунтування проекту та детальний план-графік із зазначенням фаз розвитку проекту. Але це вже інша велика тема, яка потребує окремого розгляду.

Одне можна сказати точно, що до впровадження MDM-системи необхідно підходити дуже виважено і поступально. Більшість проектів впровадження MDM-систем провалюються саме через недооцінку складності та обсяг змін, з якими доводиться стикатися в MDM-проектах.