CTT.ITT - РМ по управлению данн (1) RU

Приложение №1
Утверждено
Решением Правления
АО «Самрук- Қазына» №27/16
от 26 июля 2016 года
РЕФЕРЕНСНАЯ МОДЕЛЬ
ПО УПРАВЛЕНИЮ ДАННЫМИ
ДЛЯ ПОРТФЕЛЬНЫХ КОМПАНИЙ
АО «САМРУК-ҚАЗЫНА»
Июль 2016
Содержание
1. Глоссарий.................................................................................................................................. 1
2. Введение .................................................................................................................................. 2
3. Структура книги ........................................................................................................................ 4
4. Предпосылки управления данными ........................................................................................ 5
5. Данные как объект управления ............................................................................................. 10
6. Управление данными как бизнес—функция ......................................................................... 17
7. Подход к управлению данными ............................................................................................ 21
8. Процессы управления данными референсной модели ......................................................... 33
9. Архитектура данных предприятия ......................................................................................... 42
10. Применяемые инструменты и технологии............................................................................. 44
11. Руководство DAMA-DMBOK Guide .......................................................................................... 50
12. Стратегия управления данными портфельной компании ..................................................... 52
13. Факторы успеха управления данными................................................................................... 54
14. Примеры лучших зарубежных практик ................................................................................. 55

Глоссарий
CMS Класс информационных систем, используемых для обеспечения в

(Content Management организации совместного процесса создания, редактирования и
System) управления контентом — неструктурированной информацией
(сканированные копии документов, файлы офисных приложений,
медиа-файлы и т.п.).
DAMA-DMBOK DAMA International Guide to Data Management Body of Knowledge

(англ.) — Свод знаний по управлению данными Международной
ассоциации по управлению данными ДАМА Интернешнл.
Gartner Исследовательская и консалтинговая компания,

специализирующаяся на рынках информационных технологий.
MDM Набор дисциплин, процессов и технологий для обеспечения

(Master Data точности, полноты, своевременности и согласованности мастер-
Management) данных в различных приложениях, системах и базах данных, в
нескольких бизнес-процессах, функциональных областях,
организациях и географических местоположениях.
Архитектура данных Набор документов (каталоги, матрицы, диаграммы), которые

содержат описание концептуальной, логической и физической
структуры данных компании, влияния данных на бизнес
предприятия, а также потоки данных и средства управления
данными.
Куратор данных Роль ответственного сотрудника бизнес-подразделения, который

определяет единые требования к качеству данных и порядок
создания/изменения/удаления (блокировки) данных.
Объект данных Совокупность данных (записей), представляющих определенную

бизнес-сущность, например, услуги, материалы, места
возникновения затрат и др. Объект данных может быть представлен
в виде справочника, словаря или классификатора.
Управление данными Дисциплина, методология, а также совокупность процессов по

управлению данными как ценным информационным активом
предприятия.
1
Введение
Настоящая книга дает рекомендации по организации управления данными в группе
компаний АО «Самрук-Ⱪазына», в основе которых лежат лучшие зарубежные практики по
управлению данными, руководства по управлению данными DAMA-DMBOK Guide,
разработанного Международной ассоциацией по управлению данными DAMA
International, практический опыт управления данными, полученный сотрудниками
Центральной команды трансформации в ходе проектов в СНГ и за его пределами.
Предпосылками документа выступают низкий уровень зрелости компаний Фонда в сфере
управления данными, многочисленные ошибки и проблемы, выявленные в ходе
диагностики компаний, которые являются следствием низкого качества данных
в информационных системах. Данными либо управляют слабо, либо не управляют совсем.
Такое состояние негативно влияет на деятельность портфельных компаний и может
повлиять на результаты Программы трансформации.
Согласно подходу, предлагаемого в книге, данные и информация являются ценным
активом любой компании, которым надо управлять. Управление данными — это бизнес-
функция, цель которой обеспечить операционную деятельность и развитие компании
необходимыми данными надлежащего качества в нужное время и в нужном месте. В виду
больших объемов и разнотипности данных, сложности организации и системного
ландшафта управление данными становится комплексной задачей, которая требует:
 разработку и постоянную поддержку архитектуры данных предприятия;
 разработку и внедрение единых принципов, стандартов, политики, процессов и

процедуры по управлению данными;
 вовлечение руководителей и сотрудников бизнес-подразделений в процессы

управления данными, контроль и устранение проблем, связанных с данными;
 обеспечение управления качеством данных на основе экономической

целесообразности и требований бизнеса, распределение и закрепление
ответственности за качество данных;
 внедрение инструментов, обеспечивающих процессы управления данными,

автоматизация процессов ввода, хранения, интеграции, обработки и архивации
данных.
Для достижения указанных результатов портфельные компании (далее — ПК) в рамках
Программы трансформации должны разработать и утвердить Стратегию управления
данными, спроектировать модели бизнес-процессов по управлению данными и
архитектуру данных в составе архитектуры предприятия. В каждой портфельной компании
должен быть сформирован офис управления данными, как центр компетенций и единый
координационный орган, взаимодействующий с кураторами данных — сотрудниками,
представляющими интересы бизнес-подразделений в части данных.
Для обеспечения качества данных и эффективности процессов управления портфельные
компании должны определять метрики и выполнять мониторинг их качества в
2
информационных системах, оценивать затраты и экономическую эффективность
управления данными.
Эффективное функционирование и развитие ПК, достижение целей, поставленных в
рамках Программы трансформации зависит не только от грамотно выстроенных бизнес-
процессов и производительности информационных систем, которые их автоматизируют,
но и от точности и актуальности данных, которые используются для формирования
информации, лежащей в основе принятия управленческих решений.
В современных условиях, учитывая степень проникновения информационных технологий в
бизнес-процессы предприятия, можно утверждать, что данные являются ценным активом,
который при должном обращении с ним может принести существенные выгоды. В то же
время, пренебрежительное отношение к данным может нанести убытки.
Для того чтобы данные приносили пользу, ими необходимо управлять так же, как и любым
активом предприятия.
Цель настоящей книги – дать концептуальное описание деятельности по управлению
данными как бизнес-функции, которое позволит понять:
 принципы и цели управления данными;
 процессную модель управления данными;
 роли и ответственность участников;
 показатели эффективности и метрики качества данных;
 соответствующие технологии и их основные функции;

и как практический результат:
 организовать управление данными внутри портфельных компаний;
 повысить качество данных в информационных системах;
 обеспечить прозрачность и эффективное функционирование бизнес-процессов.

Настоящая книга предназначена для руководителей и специалистов АО «Самрук-Ⱪазына»
и его портфельных компаний, как ответственных за организацию управление данными, так
и их потребителей, заинтересованных в качественных данных и достоверной информации,
получаемой из информационных систем.
3
Структура книги
Для облегчения пользования книгой Вы можете использовать вопросы и разделы книги,
приведенные ниже. Они помогут вам выбрать наиболее подходящую главу книги,
необходимую для поиска ответа на ваш вопрос.
Несмотря на то, что каждая глава может быть прочитана отдельно, мы рекомендуем Вам
внимательно ознакомиться со всей книгой, чтобы полностью понять и применять
референсную модель по управлению данными.
Название раздела Краткое содержание Стр.
Глоссарий Основные термины, сокращения и определения, используемые в 1
книге.
Предпосылки управления Проблемы, зафиксированные в ходе Программы трансформации, 5
данными оценка зрелости управления данными по модели Gartner.
Данные — объект Ценность данных, как информационных активов, типы данных, 10

управления требования к данным.
Управление данными как Цели управления данными, место функции управления данными 17
бизнес-функция в организации, эффекты управления данными.
Подход к управлению Бизнес-принципы, организационная и функциональная 21

данными диаграммы управления данными, перечень процессов. Роли
участников управления данными в портфельных компаниях.
Роль АО «Самрук-Ⱪазына» в управлении данными.
Процессы управления Краткое описание процессов управления данными: назначение, 33

данными референсной цели, основные шаги, результаты, матрица ответственности и
модели ключевые показатели деятельности (далее — KPI).
Архитектура данных Краткое описание подхода к проектированию архитектуры 42

предприятия данных предприятия. Этапы, принципы и основные результаты.
Применяемые Назначение, ключевые функции и сценарии использования 44

инструменты и технологии инструментов, обеспечивающих управление данными.
Руководство DAMA - Обзор DAMA-DMBOK Guide, его применение для разработки и 50

DMBOK Guide совершенствования подхода к управлению данными.
Стратегия управления Общее описание требований к документу с перечнем вопросов на 52

данными который должна ответить Стратегия управления данными.
Факторы успеха Факторы успеха, которые рекомендуется принять во внимание 54

управления данными портфельным компаниям при организации управления данными.
Примеры лучших Перечень компаний, номинированные на присуждение премии 55

зарубежных практик Gartner Enterprise Information and Master Data Management (MDM)
Excellence Award.
4
4. Предпосылки управления данными
В рамках Программы трансформации, ряд портфельных компаний на стадии
«Диагностика» провел выборочную оценку качества наиболее критичных для бизнеса
данных и зафиксировал проблемы, связанные с управлением ими. Также была проведена
оценка зрелости управления данными по модели Gartner.
4.1. Проблемы качества данных в информационных системах

Примеры некоторых типовых ошибок, выявленных в наиболее критичных для бизнеса
данных портфельных компаний:
Тип ошибки Примеры Как это влияет на бизнес
Неполнота Фонд оплаты труда в компании Различная методика вычисления

описания Источник HR: x млрд показателей приводит к ошибкам в
метаданных Источник ДЭП: 1.5 x млрд — консолидированной отчетности,
данные не совпадают противоречивости получаемой информации,
затрудняет принятие решений.
Дублирование Клапан 15нж65нж Ду15 Ру16 Искажение информации о фактическом

мастер-данных ВЕНТИЛЬ 15НЖ65НЖ Ду15, Ру16 объеме складских запасов, статистики
КЛАПАН 15НЖ65НЖ ДУ15 РУ16 — движения (поступления/расхода)
один и тот же материал материалов, увеличение необоснованных
запасов, замораживание оборотных средств.
4574914 ТОО КАЗРОСИМПОРТ Затруднен поиск записей, искажение

4611863 ТОО КАЗРОСИМПОРТ информации об истории взаимодействия с
6634112 КазРосИмпорт ТОО — бизнес-партнерами. Продолжение
один и тот же бизнес—партнер отношений с поставщиками, внесенными в
черный список.
Неполнота мастер Абдыкаримов Д.Ж. ____________ — Затруднена идентификация клиентов,

— данных нет номера удостоверения снижение лояльности или потеря клиентов.
Абдикаликов Бакир ___________ — Вероятность возникновения дублирующих
нет номера удостоверения записей.
Неактуальность МАНОМЕТР МТП-100-16 — Ошибки при формировании плана закупок

мастер — данных снят с производства в 1985г.
Львова Светлана Викторовна — Ошибки при доставке корреспонденции,

вышла замуж, девичья фамилия снижение лояльности клиентов
г. Астана, ул. 50 лет Октября д.1 кв. 2
улица была переименована
Дублирование и Регламент взаимодействия.doc — Затруднение поиска актуальных документов

противоречивость Регламент взаимодействия.doc — и использование устаревших версий
документов одна из версий документа приводит к нарушению утвержденных
устарела процедур и другим проблемам в
зависимости от документов.
5
4.2. Проблемы управления данными
В ходе стадии «Диагностика» Программы трансформации в Фонде и в ПК были
зафиксированы следующие проблемы управления данными, получены комментарии
специалистов компаний и консалтинговых компаний по решению этих проблем.
Проблема Комментарии
Недооценка значимости качества данных и Необходимо рассматривать данные как

информации, своевременности и адресности ее информационный актив компании,
предоставления, отсутствие процессов управления обеспечивающий текущие бизнес-процессы и
данными и соответствующих IT-решений в компании. извлечение дополнительных выгод.
Необходимо управлять данными для
обеспечения их качества и актуальности.
Отсутствие единой структуры данных, определяющей Требуется единая структура иерархии

иерархию управленческой отчетности на разных управленческой отчетности и единый набор
уровнях в масштабах группы компаний является аналитик, в разрезе которых проводится
причиной завышенных трудозатрат по консолидации анализ отчетности.
отчетности дочерних компаний, т.к. информация
поступает «вразнобой».
Отсутствие методической и регламентирующей Требуется методическая и регламентирующая

документации по управлению данными приводит к документация по управлению данными,
тому, что справочники недостаточно контролируется. которая определит подходы и регламентирует
Это в свою очередь, ведет к наличию ошибок, процессы управления данными и закрепит
например, одни и те же контрагенты введутся под ответственность за качество данных.
разными кодировками. Такое дублирование данных
снижает достоверность управленческой отчетности и
является причиной повышенных трудозатрат по
консолидации и подготовке отчетности.
Фонд и портфельные компании применяют различные Требуется единые бизнес-термины и единые

методики расчета ключевых показателей. Это снижает алгоритмы расчета показателей.
достоверность информации в отчетности и повышает
вероятность принятия ошибочных управленческих
решений на основе этой отчетности.
Отсутствие центра компетенций по управлению Требуется бизнес-владелец процесса по

данными, который бы определял единые принципы и управлению данными и квалифицированные
политику управления данными в рамках группы специалисты по управлению данными.
компаний приводит к тому, что отсутствуют единые
стандарты по управлению данными, отсутствует
понимание как управлять и эффективно использовать
данные информационных систем.
Отчетность для руководства сдается с использованием Требуется автоматизация процессов

программ Excel и Powerpoint, что приводит к ошибкам управления данными.
ручного ввода, много версионности и усложняет
процесс актуализации данных в файлах.
6
4.3. Оценка зрелости управления данными по модели Gartner
В рамках Программы трансформации для определения существующего уровня зрелости ПК
в сфере управления данными была использована модель зрелости управления данными,
разработанной компанией Gartner. Модель предлагает 5 уровней и описывает
обстоятельства, определяющие уровень зрелости данных в организациях.
Уровень зрелости Название уровня Описание уровня
Уровень 1 Осведомленный На «Уровне «1 организация достигает некоторой

осведомленности относительно управления
информацией. Отсутствует бюджет, ресурсы или
руководство для значительных достижений.
Уровень 2 Реактивный На «Уровне 2», бизнес и IT-руководители

одобрительно реагируют на потребности ключевых
бизнес-единиц в консистентной, точной и
своевременной информации. Они принимают
корректирующие меры для удовлетворения
сиюминутных потребностей.
Уровень 3 Проактивный На «Уровне 3» организация воспринимает данные и

информацию как необходимость для улучшения
эффективности бизнеса и, следовательно, двигается
от управления данными на уровне проектов к
корпоративному управлению данными и
информацией. Данные и информация
поддерживают оптимизацию процессов.
Уровень 4 Управляемый На «Уровне 4» организация рассматривает

управление данными и информацией как
критический фактор успеха. Организация внедрила
управление данными и информацией в
значительной степени, в т. ч. создала консистентную
информационную инфраструктуру.
Уровень 5 Эффективный На «Уровне 5», организация использует информацию

по всей цепочке ценности, предоставляя ее в
соответствии с соглашениями об уровне
обслуживания (SLA), которые постоянно
пересматриваются.
Оценка показала, что портфельные компании АО «Фонд национального благосостояния

«Самрук-Қазына» (далее — Фонд) имеют низкую зрелость, соответствующую уровням 1 и
2. Такой уровень в сфере управления данными затрудняет повышение зрелости бизнеса и
информационных технологий. Целевые уровни зрелости, которые должны быть
достигнуты в рамках Программы трансформации — 3-4. Новый уровень зрелости
достигается только после полного выполнения условий предыдущих уровней (Пример 4.1).
7
Пример 4.1. Уровни зрелости организации в сфере управления данных
Уровни зрелости организации в сфере управления данными
1 2 3 4 5
Высокая Осведомленный Реактивный Проактивный Управляемый Эффективный
Зрелость организации в сфере управления данными
Целевая
зрелость
Текущая
зрелость
Низкая
Gartner Март 2016
Основные признаки текущей зрелости:

 Растет осведомленность о скудном (плохом) качестве данных и неуместной и
фрагментированной информации в ключевых предметных областях. Аналитические
приложения создают стопки противоречивых или некорректных отчетов. Никто не
несет ответственность за решение этих проблем.
 Бизнес-подразделения понимают ценность информации и делятся ею в кросс-

функциональных проектах. Никто еще не видит необходимости в координации
управления информацией всего предприятия.
 IT-департамент принимает меры для совместного использования данных

функциональными подразделениями, например, управление мастер-данными, но
не признает необходимость единой информационной архитектуры, чтобы связать
MDM с другими инициативами, например, внедрение системы бизнес-аналитики.
 Организация обращает внимание на качество информации, только когда проблемы

становятся очевидными. IT-департамент понимает важность единых метаданных,
но не управляет ими стратегически. Отсутствует стратегия управления
корпоративным контентом (далее — ECM).
Основные признаки целевой зрелости:
 Высшее руководство признает информацию в качестве стратегического актива.
Руководство поддерживает программу управления данными и информацией,
которая рассматривает потребности ключевых заинтересованных сторон, а также
требования и приоритеты, основанные на бизнес-стратегии.
8
 Корпоративная архитектура данных задает основные направления для управления
данными и информацией, гарантируя, что обмен информацией в организации
происходит для поддержания бизнес-стратегии компании. Организация
устанавливает стандарты для технологических решений по управлению
информацией.
 Создана группа, которая координирует всю деятельность в области управления
информацией на предприятии. Кураторы данных в бизнес-подразделениях берут на
себя ответственность за качество данных.
 Организация определяет политику и стандарты для достижения согласованности.
Управляющие комитеты и рабочие группы решают проблемы, связанные с
вопросами управления кросс-функциональной информацией. Определены лучшие
практики и команда архитекторов применяет меры, чтобы они использовались в
масштабах компании.
 IT-департамент стремится сделать управление информацией прозрачным для
пользователей, кураторов данных со стороны бизнеса, играющих активную роль.
Управление данными и информацией связано со стратегическими инициативами
такими, как улучшение бизнес-процессов.
 Управление данными и информацией способствует повышению
производительности, соблюдению требований регулирующих органов и снижает
риски. Мониторинг и контроль соблюдения требований управления информацией
автоматизирован по всему предприятию.
Методика оценки зрелости управления данными по модели Gartner представлена в
«Руководство по трансформации», том 9.
9
5. Данные как объект управления
5.1. Ценность данных как информационных активов
Основную бизнес-выгоду данные приносят тогда, когда они используются для
формирования бизнес-информации на предприятии.
Информация на предприятии — это совокупность сведений о прошлом и настоящем
финансово-экономическом состоянии предприятия, условиях его развития, сведения об
имуществе организации и правах на это имущество.
От качества данных зависит достоверность информации, регистрируемой в
информационных системах и получаемой из информационных систем. На основе этой
информации менеджмент предприятия выносит суждения о текущем положении дел,
анализирует накопленную статистику, прогнозирует развитие событий, принимает
управленческие решения. Эти решения могут быть неверными в виду того, что они приняты
на основе недостоверной информации. Неверные управленческие решения ведут к
финансовым потерям (Пример 5.1).
Ошибка в Ошибки в транзакциях Ошибки в Ошибки в

справочнике отчетности принятии решений
материал
вид движения
склад
! !
дата
количество
Пример 5.1. Одна из причин ошибочных решений
Расчет ценности информационных активов — это научный труд, т.к. ценность данных
зависит от многих специфичных факторов, определяющих какой вклад они вносят в бизнес
организации и затрат на создание/приобретение данных и их поддержку. При этом,
очевидно, что снижение качества данных (как и неправильное их использование) снижает
их ценность, т.к. может приводить к искажению информации, ошибкам пользователей,
принятию неверных управленческих решений и убыткам.
Рассмотрим пример расчета стоимости данных на основе оценки экономии затрат за счет
переиспользования данных при формировании различной учетной информации.
Например, если организация периодически закупает одни и те же материалы можно
создать справочник этих материалов, который будет представлять список записей, где
каждая запись — закупаемый материал со специфичными характеристиками. В
современных информационных системах такие записи, помимо идентификационного
кода, наименования и единицы измерения могут содержать большой набор полей,
специфичных для различных функциональных областей.
В последующем, при регистрации бухгалтерских проводок, можно не вводить все данные
материала заново, а просто выбрать запись из справочника. То же самое касается
справочников контрагентов, услуг, сотрудников и т.д. Такие справочники называются
мастер-данными или нормативно-справочной информацией (НСИ). Термин «НСИ»
10
использовался во время СССР и не отображает сущность подобных данных, поэтому в этой
книге используется термин «мастер-данные».
При создании мастер-данных большое внимание уделяется их качеству, т.к. эти записи
используются многократно как в операционной деятельности, так и при формировании
аналитической информации. Поэтому централизованное создание этих записей в системе
по заявкам пользователей является предпочтительным способом. Пользователь, который
не нашел необходимую запись, формирует заявку, которая в последующем
согласовывается, дополняется и утверждается другими ответственными лицами,
принимающими участие в создании (актуализации) записи.
Мастер-данные — это только пример. Существуют множество типов данных, которые также
могут быть однократно вводиться в систему и многократно переиспользоваться, например,
документы, медиа-контент, бизнес-термины (метаданные), транзакционные данные
(в данном случае переиспользования подразумевает накопление и анализ статистической
информации), данные, записываемые счетчиками и т.д.
11
5.2. Типы данных
Модели данных
Технические
метаданные
Описания
объектов данных
Метаданные
Классификации и
таксономии
Бизнес-
метаданные
Бизнес-
глоссарии
Субъекты Справочники
Референсные и
Места Справочники
мастер-данные
Объекты Справочники
Мудрость
Знания
Функциональных
Таблицы
Информация приложений
Конфигурационные
данные
Данные Общесистемных
Таблицы
компонентов
ТД бизнес-
Таблицы
функции 1
Транзакционные ТД бизнес-
Таблицы
данные функции 2
...
ТД бизнес-
Таблицы
функции n
Текстовые Репозитории
Неструктурированные
Графические Репозитории
данные
Видео и аудио Репозитории
Факты Кубы данных

Аналитические
данные
Аналитики Справочники
Пример 5.2. Типы данных
12
Метаданные — информация о данных, об их характеристиках. Метаданные определяют
структуру и форматы полей, отношения между объектами данных или бизнес-сущностями,
представляют информацию о том, кто, как, зачем и где использует данные. Различают два
типа метаданных: бизнес-метаданные, технические метаданные.
Бизнес-метаданные — бизнес-термины, их описания, взаимосвязи, классификации,
свойства, атрибуты, история изменений, бизнес-правила, происхождение данных,
алгоритмы их обработки и др.
Технические метаданные — это описания IT-элементов, таких как: таблицы и поля баз
данных, ограничения и правила преобразования данных, физические модели данных,
процедуры преобразования и обработки данных, интерфейсы приложений и др.
Референсные и мастер-данные — данные каталогов, классификаторов, словарей и
справочников. Это критичные, условно постоянные данные, используемые
централизованно различными бизнес-процессами, функциональными областями,
подразделениями, модулями и транзакциями. Они представляют структурированные
списки записей, идентифицирующих определенные объекты учета или бизнес-сущности,
например, закупаемые материалы, услуги, продукция, счета, банки, сотрудники и т.д.
Референсные данные — разновидность мастер-данных. Это редко меняемые справочники,
в том числе получаемые из внешних источников, например, перечень валют, перечень
стран, перечень единиц измерения и т.п. Часто термин «референсные данные» не
используется, используется общий термин — мастер-данные. В странах бывшего СССР
«мастер-данные» называют нормативно-справочной информацией, но этот термин
является рудиментом и не является смысловым синонимом термина «мастер-данные».
Конфигурационные данные — данные настроек функциональных и общесистемных
компонентов, изменение которых влечет конфигурационные изменение системы,
например, виды материалов в ERP-системе, организационная структура, диапазоны
номеров материалов и др. Конфигурационные данные хранятся в специальных таблицах и
в зависимости от своей специфики могут как отображаться, так и быть скрытыми для
пользователей.
Термин «конфигурационные данные» используется при внедрении ERP-систем, чтобы
определить изменения каких данных необходимо переносить транспортными запросами
через все системы — от системы разработки и тестирования до продуктивной системы.
Транзакционные данные — данные, отображающие результат выполнения транзакции и
относящийся непосредственно к бизнес-операции. Транзакционные данные или
транзакции относятся к фиксированному моменту времени и содержат сведения,
фиксированные на данный момент времени, не изменяющиеся в будущем.
Транзакционные данные обычно представляют собой повторяющиеся примеры событий,
явлений, происшествий одного и того же типа, например, поступление материала на склад.
К транзакционным данным относятся складские и банковские операции, а также все
заявки, счета, накладные, так как все они зафиксированы и привязаны к некоторому
моменту времени (времени их составления или регистрации).
13
Неструктурированные данные или неструктурированная информация — файлы
документов, электронные сообщения, аудиофайлы, цифровые изображения, видеоклипы,
контент web-сайтов и другие данные, которые хранятся в форме, не позволяющей
осуществлять простую и логичную классификацию, в отличие от структурированных
данных, полученных посредством ввода информации в электронные формы, в результате
вычислений или каких-либо других компьютерных транзакций, в процессе которых
автоматически создаются наборы структурированной информации.
Аналитические данные — любые собираемые и накапливаемые данные с целью
последующей обработки, анализа и извлечения аналитической информации. Как правило,
анализируются данные о свершившихся фактах в разрезе определенных аналитик или
размерностей. При этом, в качестве анализируемых данных могут выступать
транзакционные данные, а в качестве аналитик — мастер-данные.
Один объект данных может обладать качествами нескольких из вышеописанных типов
данных.
14
5.3. Требования к данным
Требования к данным как со стороны бизнеса, так и со стороны информационных
технологий влияют на стоимость создания/приобретения и владения данными, поэтому
они должны быть экономически обоснованы. Требования можно сгруппировать в
пять групп (Пример 5.3).
Пример 5.3. Группы данных.
 Доступность
o Видимость — данные отображаются целевому потребителю.
o Понятность — данные понятны целевому потребителю.
o Возможность совместного использования разными подразделениями.
o Совместимость — возможность передачи из одной системы в другую.
 Качество
o Допустимость — выбор значения из предопределенного списка значений.
o Целостность — исключение потери данных при передаче и других
операциях.
o Корректность — данные не противоречат определенным правилам.
o Полнота — заполнены все поля, обязательные для заполнения.
 Эффективность
o Значимость — данные представляют ценность для организации.
o Уникальность — данные не дублируются в рамках одной организации.
15
o Соответствие требованиям — данные соответствуют бизнес-
требованиям.
o Актуальность — данные обновляются и своевременны (не запаздывают
относительно оптимальных сроков принятия решения).
 Согласованность
o Легитимность — данные являются надежным источником информации.
o Согласование изменений — изменения в данных согласовываются.
o Авторизованный ввод — данные вводят авторизованные пользователи.
o Приватность —персональные данные обрабатываются с разрешения их
владельцев.
 Безопасность
o Конфиденциальность — не разглашаются конфиденциальные данные.
o Ретроспективность — хранится история изменений данных.
o Аутентичность — обеспечивается подлинность данных.
o Защищенность — обеспечивается информационная безопасность данных.
16
6. Управление данными как бизнес-функция
6.1. Цели управления данными
 Разработать и внедрить единые принципы, стандарты, политики и процедуры по
управлению данными.
 Определить потребности бизнеса в данных, разработать и поддерживать архитектуру
данных предприятия.
 Обеспечить управление качеством данных на основе требований бизнеса,
распределить ответственность за их качество.
 Обеспечить соответствие данных требованиям внешних регулирующих органов.
 Внедрить инструменты, обеспечивающие процессы управления данными,
автоматизировать процессы ввода, хранения, интеграции, обработки и архивации
данных.
 Организовать обмен данными со внешними источниками и потребителями, обеспечить
информационную безопасность данных.
 Поддерживать реализацию проектов в части разработки архитектуры данных,
подготовки и последующей поддержки (ведения) данных.
 Вовлечь руководителей и сотрудников бизнес-подразделений в процессы по
управлению данными, контролировать и устранять проблемы, связанные с ними.
 Определить алгоритмы расчета стоимости информационных активов, метрики качества
данных и показатели эффективности процессов управления данными, организовать
мониторинг деятельности по управлению данными.
 Повышать осведомленность бизнеса о ценности информационных активов и
необходимости управления ими, формировать соответствующую культуру в отношении
качества данных и информации, вводимых в информационные системы.
 Накапливать экспертизу в сфере управления данными, в том числе, по различным
типам данных и используемым специализированным приложениям.
6.2. Место функции управления данными в организации

Если рассматривать управление данными как бизнес-функцию организации, содержащую
свой набор бизнес-процессов с организационной структурой, ролями и результатами,
первые вопросы, которые возникают у бизнес-архитектора: «На каком уровне бизнес-
процессов должно быть «Управление данными»? и «Какому топ-менеджеру в организации
эта функция должна быть подчинена?».
В рамках Программы трансформации рекомендуется «Управление данными» относить на
первый уровень бизнес-процессов в виду того, что:
а) это новая функция и необходимо подчеркнуть ее значимость для организации;
б) это кросс-функциональная функция, так как данные используются в организации
повсеместно, менеджеры и сотрудники, участвующие в бизнес-процессах по управлению
данными, будут взаимодействовать со всеми организационными подразделениями.
В соответствии с лучшими зарубежными практиками, за управление данными в
организации должен быть назначен Chief Data Officer (CDO) (англ. — руководитель по
управлению данными), Data Management Executive (DME) (англ. — исполнительные
17
директор по управлению данными), варианты подчиненности которого, а соответственно
и бизнес-функции «Управление данными», приведены в следующем отчете Gartner "CDO
Reporting Relationships Can Make or Break Your Information Management Program" от 25
февраля 2015 года.
Направление и Цели Достоинства Недостатки Показатели
уровень деятельности
подчиненности
(CEO = 0)
CEO, 1, 2 Создание Позиционирование Неудачи CDO также Рентабельность,
дополнительной роли CDO как важной и получают широкую Отчет о доходах и
стоимости. бизнес- огласку. расходах.
ориентированной. Завышенные
Широкая огласка ожидания от
успехов деятельности деятельности CDO.
CDO.
Собственный бюджет и
инвестиции.
COO, 3 Операционная Кросс-функциональная Может быть Рентабельность
эффективность. роль. При нехватке недостаточное активов,
полномочий внимание к бизнес- внутренняя норма
ответственность может рискам. доходности.
распределять Совет по Возможен фокус на
управлению данными. достижении
За управление краткосрочных
данными отвечает целей, а не на
бизнес, не ИТ. реализации
долгосрочной
стратегии.
CFO/back office, Операционная Кросс-функциональная Возможно, что Количество
3-5 эффективность, роль. Данные деятельность CDO аудиторских
достоверность рассматриваются и будет ограничена проверок.
отчетности, оцениваются как управлением
сокращение информационный актив данными,
расходов. предприятия. обеспечивающими
управление
финансами.
Риск фокусирования
на эффективности
информационных
активов. Нехватка
инициатив,
обеспечивающих
цели CEO, COO.
CIO, 3 или 4 Операционная Кросс-функциональная В организации Отношение
эффективность, роль. Тесное создается административно-
сокращение сотрудничество с ИТ. впечатление что управленческих
расходов, Четкое разделение данные расходов к уровню
создание обязанностей, (информация) это дохода,
дополнительной связанных с актив, владельцем соблюдение SLA,
стоимости. управлением данными. которого является аудиторские
ИТ (не бизнес) и проверки.
зависит от
технологий.
CISO, 3-5 Снижение Существенное Излишний фокус на Тестирование
рисков. повышение уровня безопасности безопасности,
безопасности данных, данных, а не на аудиторские
увеличение расходов возможностях. проверки.
18
на информационную Выстраивание
безопасность. ненужных стен,
которые мешают
инновационному
развитию.
CLO, 3 Сокращение Юридический отдел — Деятельность по Аудиторские
рисков, влиятельный партнер, у управлению проверки.
соответствие которого есть что данными
требованиям достигать (и что терять) воспринимается как
регулирующих посредством хорошо создание работы
органов. управляемой там, где ее никогда
информацией. Четкий не было. Излишний
фокус как на фокус на негативных
структурированной, так стимулах, таких как
и неструктурированной риски.
информации. Возможность
увязнуть в рутине
управления
записями.
CRO, 3 или 4 Сокращение Хорошо Негативное Аудиторские
рисков, организованная восприятие проверки, меньше
соответствие функция, возможны аудиторов обязательств.
требованиям большие победы. сотрудниками
регулирующих других бизнес-
органов. функций. Излишний
фокус на рисках, а
не на возможностях.
CMO/front Создание Фокус на позитивных Возможность Доход,
office, 3 или 4 дополнительной результатах, например, ограничиться только удовлетворение
стоимости. генерация дохода. данными клиентов. клиентов.
Согласно исследований Gartner, руководитель, ответственный за управление данными в

организации достигнет наибольшего успеха подчиняясь CEO, COO или CFO. Однако, это
возможно при достаточном уровне зрелости организации в этой сфере.
На практике «Управление данными» воспринимается как функция информационных

технологий, соответственно, ее предлагают подчинить департаменту информационных
технологий. Это грозит тем, что за результат этой функции — «качественные данные»
приходится отвечать службе информационных технологий. В результате «Управление
данными» воспринимается не как бизнес-функция, а как обслуживающая функция ИТ. В
этом случае очень трудно вовлечь бизнес-подразделения в процессы управления данными
и организовать Data Stewardship — подход в соответствии с которым сотрудники из бизнес-
подразделений определяют требования к качеству данных, порядок ведения и
использования данных.
Вместе с этим, есть успешные примеры, когда различные передовые практики, такие как
управление архитектурой предприятия, сервисные модели и др. были разработаны и
внедрены службой информационных технологий, а затем их переняли бизнес-
подразделения. Поэтому на стадии становления «Управления данными», как новой
функции в организации, ее можно подчинить директору по информационным технологиям
при условии, что этот директор имеет статус, аналогичный западному CIO (Chief Information
Officer (англ.) — руководитель информационной службы) или вице-президента,
отвечающего за информационную поддержку бизнеса, и получающего в этом качестве
19
существенно более широкие полномочия, позволяющие вовлечь бизнес-подразделения в
процессы управления данными.
В дальнейшем, при повышении уровня зрелости организации и развитии функции, она

может быть передана CEO, COO или CFO для достижения наибольшего успеха.
6.3. Эффекты управления данными

 Обеспечение прозрачности бизнеса за счет повышения достоверности
консолидируемой отчетности.
 Обеспечение связности бизнес-процессов, исключение информационных разрывов.
 Повышение стоимости информационных активов за счет повышения качества данных и
их переиспользования.
 Обеспечение уверенности в принимаемых решениях за счет повышения доверия к
информации, получаемой из информационных систем.
 Обеспечение ускорения вывода на рынок новой продукции/услуг, удержание клиентов,
повышение лояльности бизнес-партнеров.
 Возможность накапливать статистическую информацию и использовать ее для анализа
и прогнозирования.
 Предоставление новых возможностей для каждого автоматизируемого процесса.
 Снижение расходов на поддержку и хранение избыточных данных.
 Снижение информационных рисков.
20
7. Подход к управлению данными
7.1. Бизнес-принципы управления данными
Для успешной реализации референсной модели по управлению данными необходимо
руководствоваться следующими, едиными по группе компаний Фонда, бизнес-
принципами:
 Данные — ценный информационный актив, которым необходимо управлять, чтобы
обеспечить эффективную деятельность и развитие предприятия.
 Качество данных должно соответствовать документированным требованиям,
постоянно поддерживаться и контролироваться по соответствующим метрикам.
 Управление данными — бизнес-функция, в которой бизнес и ИТ должны действовать
согласованно, координация их деятельности должна осуществляться из единого
центра.
 Процессы управления данными не должны быть излишне бюрократизированы, но
необходима их регламентация, закрепление ответственности и мониторинг
показателей.
 Автоматизация управления данными должна обеспечивать выполнение необходимых
операций с данными и непрерывность деятельности предприятия.
7.2. Организация управления данными в группе компаний

В Центральной команде трансформации сформирована команда по управлению
данными, которая решает следующие задачи:
 Разработка референсной модели по управлению данными и стандартов в рамках
лучших передовых практик. Интеграция процессов по управлению данными с
процессами других бизнес-функций.
 Внедрение специализированных технологических решений по управлению
данными и создание на их основе шаблонных решений для ПК (например, системы
управления мастер-данными, моделирования данных, управления качеством
данных и др.).
 Проектирование архитектуры данных централизованных информационных систем
и шаблонных решений, внедряемых Центральной командой трансформации,
участие в спецпроектах в части проектирования архитектуры данных.
 Создание сервисов по управлению данными в рамках построения сервисных
фабрик: DaaS (данные как сервис), SaaS (система как сервис), PaaS (платформа как
сервис), консалтинговые услуги по управлению данными, аудит данных.
 Организация подготовки данных для проектов трансформации силами офисов
управления данными ПК.
Эта команда тесно взаимодействует с офисами управления данными в портфельных
компаниях. В рамках этого взаимодействия осуществляется обучение специалистов,
ответственных за управление данными, консультации по проектированию и внедрению
архитектуры данных, процессов и инструментов управления данными, контроль качества
результатов Программы трансформации и передача экспертизы.
21
Офисы управления данными портфельных компаний решают следующие задачи:
 В рамках стадий «Диагностика» и «Дизайн», «Планирование»:
o моделирование и проектирование архитектуры данных;
o подготовка данных (консолидация, гармонизация, стандартизация, очистка)
для внедрения корпоративных шаблонов;
o проектирование процессов управления данными;
o разработка Стратегии управления данными.
 В рамках стадии «Реализация»:
o управление архитектурой данных;
o вовлечение бизнеса и внедрение процессов управления данными;
o накопление и развитие экспертизы по управлению данными;
o внедрение программно-технических решений по управлению данными.
В ходе Программы трансформации офисы управления данными должны вырасти из
рабочих групп в структурные подразделения компаний, которые уже в ходе операционной
деятельности будут осуществлять мониторинг качества данных и показателей процессов,
разрешать возникающие проблемы и решать другие задачи по повышению качества
данных и информации в компаниях. Офисы управления данными в портфельных
компаниях должны быть созданы заблаговременно для подготовки данных для систем,
внедряемых на стадии реализации.
Служба по управленческой отчетности и бюджетированию, созданная в корпоративном
центре Фонда в составе бизнес-функции «Управление финансами», в части управления
данными будет решать следующие задачи:
 Координация управления данными портфельных компаний:

o формулирование требований Фонда к организации управления данными;
o контроль соблюдения требований, политик и стандартов;
o накопление и развитие экспертизы по управлению данными.
 Управление данными в рамках Корпоративного центра:
o управление требованиями к данным;
o организация процессов управления данными;
o мониторинг качества данных.
Служба по управленческой отчетности и бюджетированию в части сбора требований к
информации и данным взаимодействует с различными департаментами Фонда:
 в части методов и подходов к управлению данными — с командой по управлению

данными Центральной командыд трансформации;
 в части внедрения инструментов управления данными (MDM, DQ, ITL, ECM, DWH, BI)
с ДИТ;
 в части транслирования требований к данным с стороны корпоративного центра
портфельным компаниям — с офисами управления данными портфельных
компаний. Они в свою очередь, транслируют эти требования в ИТ и бизнес-
подразделения портфельной компании и контролируют соблюдение требований
Фонда.
22
Таким образом, обеспечивается соответствие данных и информации портфельных
компаний как требованиям собственного бизнеса, так и требованиям корпоративного
центра, обеспечивается качество данных и достоверность отчетности.
Детальное описание функции Службы по управленческой отчетности и бюджетированию
приведено в разделе 7.8 «Роль АО «Самрук-Казына» в управлении данными».
7.3. Функциональная диаграмма управления данными

Функциональная диаграмма управления данными (Пример 7.1) отображает процессы
второго уровня (если считать «Управление данными процессом» первого уровня), которые
разделяются на сквозные процессы и процессы управления типами данных.
Управление данными начинается со сбора и анализа требований к данным и процессам.
На основе проанализированных требований разрабатывается стратегия управления
данными.
Далее выполняются работы по проектированию архитектуры данных предприятия.
Проектирование архитектуры данных предприятия выполняется в соответствии с
рекомендациями «Методика трансформации», том 9.
Далее, в соответствии со Стратегией управления данными и архитектурой данных
предприятия осуществляется подготовка данных и внедрение решений. Каждое решение
(система) может относится как к определенному типу данных (например, система
управления метаданными), так и к домену данных (например, система управления мастер-
данными клиентов). Такое разделение обусловлено не только различными классами
систем, но и различной методологией по управлению данными того или иного типа.
Сквозной процесс по мониторингу процессов и качества данных позволяет создать
процессы и данные такими, чтобы они удовлетворяли требования бизнеса.
23
Требования
Координация управления данными
Проектирование
архитектуры
данных
Управление
метаданными
Мониторинг Подготовка данных

процессов и и внедрение
мастер-данными
качества данных решений
документами и
контентом
отчетностью и
бизнес-аналитикой
Вывод данных из
эксплуатации
Инструменты
Качественные данные и информация
- входы и выходы бизнес-функции - рамки бизнес-функции

- сквозные процессы управления данными - жизненный цикл данных
- процессы управления типами данных - этап эксплуатации данных
- технологические решения (MDM, DQ, ETL, DWH, BI, ECM, ILM, инфраструктура)
Пример 7.1. Функциональная диаграмма управления данными
7.4. Управление жизненным циклом данных

Понятие жизненного цикла данных используется для обеспечения полноты управления
данными на всех этапах: от сбора требований и разработки модели данных, до вывода
данных из эксплуатации (архивация/удаление).
Функциональная диаграмма управления данными покрывает все этапы жизненного цикла
данных. Ниже в таблице указано соответствие этапов жизненного цикла данных и
процессов управления данными, указанных на диаграмме, которые покрывают эти этапы
(Пример 7.2).
Пример 7.2. Соответствие этапов жизненного цикла данных и процессов управления данными
Очередность Этап жизненного цикла данных Процесс управления данными

1 Сбор и анализ требований, планирование Координация управления данными.
создание объекта данных.
2 Разработка модели данных, определение Проектирование архитектуры данных.

источников данных.
3 Подготовка/приобретение данных, Подготовка данных и внедрение решений.
первоначальная загрузка.
4 Использование и поддержка данных Процессы управления типами данных.
(ведение). Мониторинг процессов и качества данных.
5 Архивация и удаление. Вывод данных из эксплуатации.
24
7.5. Типы данных, которые не входят в рамки процессов управления данными
референсной модели
Вне рамок процессов управления данными референсной модели находятся следующие
типы данных:
 Конфигурационные данные, т.к. управление этими данными осуществляется в

рамках процесса внесения изменений в настройки информационной системы.
 Транзакционные данные, т.к. операции с этими данными осуществляется в рамках
хозяйственной деятельности на основании регламентов бизнес-процессов. При
этом, вопросы сбора, хранения, обработки и анализа транзакционных данных
решаются в рамках процесса управления отчетностью и бизнес-аналитикой.
Настоящая книга не учитывает специфики всех предприятий ПК, рамки подхода могут быть
расширены на другие типы данных, например, данные производственных или
биллинговых систем. В этом случае, по аналогии с указанными в книге типами данных,
должны быть разработаны процессы, распределена ответственность, определены
требования к качеству данных, указаны требования к соответствующим программным
платформам и инфраструктуре.
7.6. Перечень процессов управления данными в референсной модели

Процессы управления данными условно разделяются на 2 категории:
1) Сквозные процессы управления данными:
 Координация управления данными

 Проектирование архитектуры данных
 Подготовка данных и внедрение решений
 Мониторинг процессов и качества данных
 Вывод данных из эксплуатации
2) Процессы управления типами данных:
 Управление мастер-данными
 Управление документами и контентом
 Управление отчетностью и бизнес-аналитикой
 Управление метаданными
Процессы по защите данных и операционной поддержке баз данных описаны в
референсных моделях по управлению информационной безопасностью и
информационными технологиями.
В примере 7.3. представлена диаграмма процессов второго уровня из референсной модели
в ARIS.
25
Сквозные
процессы
данными
Процессы
типами
данных
Пример 7.3. Диаграмма процессов второго уровня
7.7. Роли участников управления данными в портфельных компаниях
Совет Директоров
Основные функции:
 Способствует культурным изменениям организации в части отношения к данным

как к информационному активу, которым необходимо управлять.
 Формирует и продвигает концепцию подхода к управлению данными в
организации.
Правление
 Утверждает и является ответственным за стратегию управления данными и бюджет,

выделенный на управление данными.
 Определяет приоритеты деятельности в части управления данными.
 Оказывает необходимую поддержку руководства для повышения эффективности
 Обеспечивает активное вовлечение бизнеса и ИТ в управление данными.
 Назначает владельцев данных из каждой бизнес-функции в Совет по управлению
данными.
 Разрешает вопросы, эскалированные Советом по управлению данными.
Комитет по управлению данными
Состоит из владельцев данных от каждой бизнес-функции, назначенных Советом
Директоров. Председателям Комитета является Руководитель офиса управления данными.
Основные функции Комитета по управлению данными:
 Управляет распределением бюджета на управление данными.
26
 Оценивает эффективность управления данными и отчитывается перед Советом
Директоров.
 Обеспечивает соответствие стратегии управления данными бизнес-целям и бизнес-
стратегии организации.
 Представляет интересы всех стейкхолдеров в части управления данными.
 Рецензирует и утверждает политики по управлению данными.
 Принимает стратегические и тактические решения в части управления данными.
 Назначает бизнес-кураторов данных в Комитет кураторов данных.
 Владеет и управляет процессами, которые производят или изменяют данные.
 При поступлении жалоб, запросов и предложений в части управления данными
передает их Комитету кураторов данных.
Владелец данных
Как правило, Руководитель департамента, который является владельцем бизнес-процесса,
в котором создаются данные. Входит в Совет по управлению данными, выполняет
следующие функции:
 Обеспечивает выполнение функций Совета по управлению данными.

 Представляет интересы своей бизнес-функции в части управления данными.
 Осуществляет поиск кандидатов и назначает им роль Куратора данных для
управления данными своей бизнес-функции.
 Определяет приоритеты управления данным для данных своей бизнес-функции.
 Контролирует деятельность кураторов данных по своей бизнес-функции.
 Осуществляет поддержку руководства для обеспечения деятельности кураторов
данных по своей бизнес-функции.
Рабочая группа кураторов данных
Состоит из кураторов данных, назначенных владельцами данных. Председателем рабочей
группы кураторов данных является Руководитель офиса управления данными.
 Улучшает способы управления данными и осуществляет поиск способов извлечения

выгод из данных для бизнеса организации.
 Выполняет роль консультативного органа для стандартов предприятия,
руководящих принципов и политик уровня предприятия.
 Разрешает конфликты в части управления данными.
 Обеспечивает выравнивание усилий по управлению данными с направлением
развития бизнеса.
 Участвует в процессах управления данными.
 Выполняет просветительскую работу в части целей и подходов к управлению
данными внутри организации.
 Распространяет бизнес-правила использования данных и управления данными.
 Обеспечивает достижение целей управления данными.
 Взаимодействует с заинтересованными сторонами в части управления данными
 Оценивает эффективность деятельности по управлению данными и предоставляет
информацию в Совет по управлению данными.
27
Куратор данных
Сотрудник бизнес-подразделения, который является экспертом в данных, используемых в
его бизнес-функции. Это сотрудник, который работает с данными и может сформулировать
требования к качеству данных и бизнес-правила по их созданию или использованию.
Куратор данных (англ. — Data Steward) — сотрудник, к которому другие сотрудники бизнес-
функции обращаются с вопросами, которые касаются данных.
 Документирует метаданные — информация о данных, для которых он является

куратором: определения, бизнес-правила, списки допустимых значения,
требования к качеству данных и др.
 Осуществляет мониторинг качества данных: определяет метрики, процедуры
проверки и их периодичность, готовит соответствующую отчетность.
 Разрешает вопросы со стороны пользователей данных, проектов и других кураторов
данных в части данных, куратором которых он является.
 Определяет правила создания, изменения и использования данных, готовит
регламентирующую документацию и инструкций.
 Принимает меры по обеспечению качества данных и повышению эффективности
управления данными и использования данных.
Офис управления данными
Офис управления данными состоит из архитектора данных предприятия и менеджеров по
управлению данными. Руководит подразделением Руководитель офиса управления
данными.
 Поддерживает, документирует и публикует информацию о деятельности Совета

директоров, Совета по управлению данными, Комитета кураторов данных в части
 Определяет и документирует лучшие практики по управлению данными.
 Выполняет задачи по управлению архитектурой данных организации.
 Разрабатывает программу обучения по управлению данными для членов Совета по
управлению данными, кураторов данных, проектных менеджеров и IT-персонала.
 Внедряет политики и процедуры по управлению данными.
 Фиксирует и разрешает проблемы, связанные с данными, эскалирует их на
руководство при необходимости.
 Проводит просветительскую работу в части подхода, стратегии, процедур и выгод
 Документирует, публикует и поддерживает политики, процедуры и стандарты по
 Разрабатывает рекомендации по использованию метрик и измеряет эффективность
деятельности по управлению данными.
Руководитель Офиса управления данными
Профессионал в области управления данными, ответственный за разработку, внедрение и
совершенствование подхода к управлению данными в портфельной компании. Руководит
28
офисом управления данными и является лидером менеджеров и кураторов данных.
 Выполняет роль председателя Совета по управлению данными и Комитета

кураторов данных, контролирует чтобы в них были представители со стороны всех
бизнес-функций портфельной компании.
 Разрабатывает и поддерживает стратегию управления данными на основе бизнес—
стратегии, IT-стратегии и требований владельцев данных, входящих в Совет по
 Обеспечивает достижение результатов в соответствии со стратегией управления
данными.
 Взаимодействует с руководителями бизнес-подразделений по вопросам
 Контролирует интеграцию процессов управления данными с другими процессами
портфельной компании.
 Определяет показатели, оценивающие эффективность управления данными и
выполняет их мониторинг.
 Отчитывается перед Советом Директоров в части достижения результатов по
управлению данными, запланированными в стратегии управления данными.
 Разрешает конфликты интересов в части управления данными, эскалирует их при
необходимости на Совет Директоров.
Архитектор данных предприятия
Специалист по моделированию архитектуры данных, ответственный за проектирование и
поддержку архитектуры данных портфельной компании.
 Осуществляет дизайн архитектуры данных предприятия, по различным типам

данных (мастер-данные, данные отчетности и бизнес-аналитики и др.).
 Представляет экспертизу по возможным юридическим вопросам, связанных с
информационными активами (например, закона о хранении конфиденциальной
информации и пр.).
 Отвечает на вопросы, связанные с разработкой или использованием процессных
моделей, созданием или использованием моделей данных, проектированием
интерфейсов.
 Транслирует стратегические требования в архитектуру данных предприятия.
 Разрабатывает подходы к управлению метаданными и репозиторием для
управления всеми элементами (артефактами) архитектуры данных.
 Контролирует соответствие моделей архитектуры данных и приложений, чтобы
определить пригодность решений поставщиков требованиям архитектуры данных.
 Участвует в проверке данных, приобретаемых, поступающих из легитимных
источников, унаследованных систем или заказных разработок на соответствие их
интерфейсам аналитических приложений, тем самым обеспечивает оптимальный
уровень прозрачности, качества, соответствия и контролируемой избыточности
данных в масштабах всего предприятия.
 Обеспечивает выравнивание архитектуры данных с архитектурой предприятия.
29
 Осуществляет проверку источников данных для обеспечения предприятия новой
бизнес-информацией, выполняет поиск лучших источников данных.
Менеджер по управлению данными
Профессионал в области управления данными, принимающий участие в разработке,
внедрении и совершенствовании подхода к управлению данными в портфельной
компании. Сферы ответственности менеджеров управления данными рекомендуется
разделить по типам данных: менеджер по управлению мастер-данными, менеджер по
управлению метаданными, менеджер по управлению документами и контентом,
менеджер по управлению отчетностью и бизнес-аналитикой.
 Разрабатывает и внедряет политики и процедуры по управлению данными.

 Осуществляет внедрение систем управления данными.
 Взаимодействует с заинтересованными сторонами и кураторами данных по
вопросам управления данными.
 Разрабатывает обучающие материалы и проводит обучение кураторов данных.
 Фиксирует и разрешает проблемы, связанные с данными.
 Проводит просветительскую работу в части подхода, стратегии, процедур и выгод
 Разрабатывает рекомендации по использованию метрик и измеряет эффективность
деятельности по управлению данными.
 Обеспечивает соблюдение требований к качеству данных всей организации.
Пример взаимосвязи участников по управлению данными в организационной структуре
компании приведен в Примере 7.4. Директора департаментов получат роль владельца
данных, как ответственные за данные, создаваемые в их подразделениях. Менеджеры
тех. департаментов будут выполнять задачи куратора данных.
Руководитель офиса управления данными является ответственным за стратегическое
продвижение деятельности управления данными в дочерних организациях компании.
Руководители или менеджеры по управлению данными в дочерних организациях
выполняют задачи по повышению качества данных, продвижению культуры
управления данными, выравниванию данных для отчетности в корпоративный центр и
иные задачи по управлению данными.
30
Пример 7.4. Взаимосвязь участников по управлению данными в организационной структуре компании
7.8. Роль АО «Самрук-Ⱪазына» в управлении данными
Фонд заинтересован в повышении эффективности деятельности портфельных компаний и

получении достоверной консолидированной отчетности, которая формируется на основе
данных из их информационных систем, поэтому им осуществляется координация
деятельности портфельных компаний в части управления данными. Для этих целей
определен бизнес-спонсор и создана Служба по управленческой отчетности и
бюджетированию.
Бизнес-спонсор контролирует деятельность Службы по управленческой отчетности и
бюджетированию и соблюдение интересов Акционеров.
Служба по управленческой отчетности и бюджетированию является центром компетенций
по управлению данными и координирующим органом, его основные функции:
 Изучает и адаптирует лучшие зарубежные практики по управлению данными как в

холдинговых компаниях, так и на предприятиях.
 Внедряет подходы и процессы управления данными в Фонде для обеспечения
качества данных, создаваемых и изменяемых пользователями Фонда в его
информационных системах.
31
 Накапливает и распространяет знания в области управления данными, реализует
программы обучения, сертификации и тематические форумы.
 Определяет единые бизнес-принципы управления данными для ПК.
 Определяет требования к организации управления данными в портфельных
компаниях, разрабатывает рекомендации по применению лучших практик по
 Формирует единые политики и стандарты по управлению данными для данных,
которые являются централизованными в рамках ПК.
 Создает сервисные фабрики, выполняющие функции по управлению данными в
режиме аутсорсинга (централизованное ведение мастер-данных, подписка на
обновление данных из легитимных источников, применение инструментов по
обработке данных и др.).
 Определяет требования к качеству данных со стороны Фонда, которые транслирует
в портфельные компании.
 Осуществляет мониторинг деятельности компаний по управлению данными.
32
8. Процессы управления данными референсной модели
8.1. Процесс «Координация управления данными»
Процесс предназначен для координации деятельности участников управления данными по
созданию, управлению и использованию информационных активов. Комплексная
координация управлением данными обеспечивает организационное и архитектурное
управление данными на основе единых политик и стандартов. Это означает использование
людей, процессов, методологии и технологий для предоставления своевременных и
качественных данных, соблюдения регулятивных норм, уменьшения расходов и
увеличения доходов.
Цели процесса
 Создать и внедрить стратегию по управлению данными, политики, стандарты,
архитектуру данных предприятия, процессы и метрики.
 Обеспечивать соответствие политик, стандартов, архитектуры и процессов
управления данными нормативным требованиям.
 Поддерживать реализацию проектов и услуг по управлению данными и следить за
их успешным выполнением.
 Контролировать и устранять проблемы по управлению данными.
 Повышать осведомленность бизнеса о ценности информационных активов и
необходимости управления ими.
Основные шаги, результаты и KPI
Вход Функции Выход
 Стратегия развития  Создание стратегии управления данными  Стратегия управления
компании  Создание структуры и определение ролей по данными
 Стратегия развития управлению данными  Орг. структура и роли
ИТ  Оценка ценности информ. активов участников управления
 Требования к  Контроль соответствия информ. активов данными
данным политикам и стандартам  Стоимость информ.
 Контроль деятельности структур по активов, расходы на
управлению данными управление данными
 Перечень требований к
Участники информационным
активам
 Руководитель офиса управления данными  Отзывы об
 Руководители бизнес-подразделений эффективности и
 Руководитель по информационным производительности
технологиям участников управления
 Менеджеры по управлению данными данными
 Кураторы данных
KPI
 Доходы от эффективного управления
данными
 Уровень зрелости управления данными
33
8.2. Процесс «Проектирование архитектуры данных»
Процесс предназначен для определения потребности предприятия в данных,
проектирования архитектуры, соответствующей выявленным требованиям, и интеграции
архитектуры данных с комплексной бизнес-архитектурой предприятия.
 Создать эффективную архитектуру для поддержания деятельности компании в
создании, использовании и вывода данных из эксплуатации.
 Спроектировать модели данных для создания систем управления данными.

 Стратегия развития  Создание моделей данных  Концептуальная,
ИТ  Сопоставление моделей данных с бизнес- логическая и
 Стратегия моделями физическая модели
управления  Проектирование архитектуры данных  Матрицы
данными предприятия  Архитектура данных
 Требования к  Интеграция с архитектурой предприятия  Диаграммы
данным
Участники
 Руководитель офиса управления данными
 Руководитель по информационным
технологиям
 Архитектор данных
KPI
 Затраты; наличие логической модели
данных по каждой внедренной системе
 Эффективность архитектуры данных в
повышении эффективности процессов
компании
34
8.3. Процесс «Подготовка данных и внедрение решений»
Процесс предназначен для проведения анализа, проектирования, внедрения и поддержки
систем по управлению данными. Включает определение требований к данным,
проектирование элементов решений и их внедрение.
Каждая система представляет комплексное решение и содержит три основных блока:
Информационный, Организационный и Технологический. Информационный блок
включает сами данные: справочники, таксономии, словари, контент и др.
Организационный блок содержит процессы, регламенты, методики и другие документы,
организационную структуру, роли и показатели эффективности. Технологический блок
представляет специализированные платформы по управлению данными и
соответствующую инфраструктуру.
 Спроектировать, внедрить и поддерживать системы по управлению данными.
 Контролировать соответствие систем архитектуре данных предприятия, политикам
и стандартам управления данными.
 Контролировать целостность, безопасность, удобство использования и
обслуживания информационных активов во внедренных решениях.

 Архитектура данных  Разработка стандартов моделирования и  Стандарты
 Диаграммы проектирования данных моделирования данных
интеграции данных  Проектирование информационных продуктов и проектирования баз
 Требования к и услуг данных
данным  Подготовка данных  Спецификации к
 Внедрение решений продуктам и услугам,
процессы, регламенты,
Участники методики и роли
 Данные
 Руководитель офиса управления данными  Система управления
 Руководитель по информационным данными
технологиям
 Менеджеры по управлению данными
 Ключевые пользователи
KPI
 Полнота результатов
 Объем и качество данных
 Соответствие рамок систем и сроков ее
внедрения Стратегии управления данными
35
8.4. Процесс «Мониторинг процессов и качества данных»
Процесс предназначен для внедрения и контроля деятельности предприятия по
повышению качества данных и эффективности процессов управления данными. Качество
данных напрямую влияет на качество информации, необходимой для принятия важных
решений. Обширный процесс мониторинга качества данных обеспечивает улучшение
качества данных.
 Повысить качество данных в информационных системах и достоверность
информации, получаемой из информационных систем.
 Повысить эффективность процессов управления данными.

 Отчет о работе  Определение метрик измерения качества  KPI и метрики
кураторов данных данных и эффективности процессов  Метаданные
 Требования к  Создание бизнес-правил и требований к  Инструменты
данным качеству данных профилирования
 Внедрить инструменты, создать соглашения данных, SLA
об уровне обслуживания в части данных  Отчеты
 Мониторинг качества данных и  Журнал разрешения
эффективности процессов проблем
 Устранение ошибок качества данных и
повышение эффективности процессов
Участники
KPI
 Количество объектов данных
 Метрики качества данных и KPI
 Коэффициенты снижения стоимости
информационных активов после контроля
качества данных
36
8.5. Процесс «Вывод данных из эксплуатации»
Процесс предназначен для выявления данных, которые необходимо перенести в архив или
удалить из архива по причине истечения срока использования или хранения. Критерии для
определения сроков хранения определяются законодательными актами и внутренними
стандартами.
 Поддерживать объекты данных в актуальном состоянии.
 Вести учет и иметь доступ к историческим данным предприятия до полного
истечения срока.

 Отчет оценки  Анализ архива данных  Перечень данных на
ценности  Оценка данных архивирование или
информационных  Архивирование удаление
активов и  Удаление  Архив данных
связанных расходов
 Запрос на Участники
архивирование или
удаление данных  Руководитель офиса управления данными
 Администратор баз данных
KPI
 Количество выведенных из эксплуатации
данных
 Показатели экономии затрат на
сопровождение информационных систем
37
8.6. Процесс «Управление мастер-данными»
Процесс предназначен для планирования и внедрения системы управления мастер-
данными, а также для обеспечения деятельности по созданию, изменению и удалению
(блокировке) мастер-данных.
 Обеспечить информационные системы и пользователей едиными мастер-данными.
 Повысить скорость обработки заявок на создание, изменение, удаление данных.

 Стратегия  Создание требований к мастер-данным  Требования к мастер-
управления  Создание архитектуры мастер-данных данным
данными  Внедрение решений по управлению мастер-  Архитектура мастер-
 Политики, данными данных
стандарты и  Создание эталонных мастер-данных  Система управления
процессы  Ведение мастер-данных мастер-данными
 Требования к  Эталонные мастер-
данным данные
Участники
 Архитектура данных  Созданные,
 Руководитель офиса управления данными измененные,
 Менеджеры по управлению данными удаленные записи
KPI
 Соответствие рамок системы и сроков ее
 Добавленная стоимость информационных
активов мастер-данных
 Качество данных и KPI процессов ведения
данных
38
8.7. Процесс «Управление документами и контентом»
Процесс предназначен для планирования и внедрения системы управления документами
и контентом, а также для последующей поддержки деятельности по хранению, защите и
доступу к данным из электронных файлов и физических записей (включая текстовый,
графический, аудио и видео форматы).
 Обеспечить эффективное извлечение, хранение и использование
неструктурированных данных и информации.
 Контролировать затраты на хранение документов и контента.

 Стратегия  Создание требований к решению  Требования к решению
управления  Создание архитектуры  Архитектура решения
данными  Внедрение решения  Внедренная система
 Политики,  Разработка таксономии и наполнение  Классификация,
стандарты и репозитория документы и контент
процессы  Ведение документов и контента  Актуальные документы
 Требования к и контент
данным
Участники
 Архитектура данных
 Ключевые пользователь
KPI
данных
39
8.8. Процесс «Управление отчетностью и бизнес-аналитикой»
Процесс предназначен для планирования и внедрения системы управления отчетностью и
бизнес-аналитикой и последующей поддержки деятельности по обеспечению работников
данными и знаниями для создания запросов, отчетов и анализа информации.
 Обеспечить сотрудников необходимыми инструментами и данными для анализа и
принятия решений.
 Обеспечить управление изменениями отчетности и бизнес аналитики (создание
новых отчетов, аналитических разрезов и т.д.).

управления  Создание архитектуры  Архитектура решения
данными  Внедрение решения  Внедренная система
 Политики,  Консолидация данных и настройка отчетов  Классификация,
стандарты и  Актуализация алгоритмов и форматов документы и контент
процессы отчетности  Отчеты и данные
 Требования к бизнес-8нализа
данным
Участники
KPI
данных
40
8.9. Процесс «Управление метаданными»
Процесс предназначен для планирования и внедрения системы управления метаданными,
а также для последующей поддержки деятельности по ведению метаданных (создание,
изменение и удаление данных).
 Обеспечить сотрудников необходимым инструментом для сбора и поддержания в
актуальном состоянии информации о данных (метаданные).
 Обеспечить качество метаданных и их целостность.
Основные шаг, результаты и KPI

управления  Создание архитектуры решения  Архитектура решения
данными  Внедрение решений по управлению  Система управления
 Политики, метаданными метаданными
стандарты и  Получение и описание метаданных  Метаданные
процессы  Ведение метаданных  Обновленные
 Требования к метаданные
данным
Участники
KPI
данных
41
9. Архитектура данных предприятия
В рамках Программы трансформации для проектирования архитектуры данных
применяются следующие принципы, сформулированные DAMA (англ. — Data Management
Association International), Международной ассоциацией управления данными и
представленные в DAMA-DMBOK Guide, руководстве по управлению данными:
 Архитектура данных должна представлять интегрированный набор спецификаций

артефактов (основных концепций) и использоваться для определения требований к
данным, проведения интеграции данных, управления информационными активами
и выравнивания капиталовложений в данные с бизнес-стратегией.
 Архитектура данных предприятия должна рассматриваться как часть общей
архитектуры предприятия, наряду с архитектурой процессов, бизнес-архитектурой,
системной и технической архитектурой.
 Архитектура данных предприятия должна включать в себя три основные категории
спецификаций: модель данных предприятия, анализ ценности информации и
архитектуру передачи данных.
 Архитектура данных предприятия — это больше, чем просто данные. Она должна
устанавливать терминологию предприятия используя общий бизнес-словарь.
 Модель данных предприятия — интегрированная предметно-ориентированная
модель данных, которая должна определять основные данные, используемые по
всей организации. Модель данных предприятия должна быть построена в слоях:
общее представление предметной области, концептуальные представления
сущностей и связей для каждой предметной области и более подробные,
атрибутивные представления этих предметных областей.
 Анализ ценности информации должен определять критичные отношения между
данными, процессами, ролями и организациями, а также другими элементами
предприятия.
 Архитектура передачи данных должна определять основную концепцию потоков
данных между базами данных и приложениями. Это гарантирует качество и
целостность данных для поддержки транзакционных бизнес-процессов, отчетности
бизнес-аналитики и ее анализа.
 Для организации коллективного мышления об архитектуре необходимо применять
архитектурные методологии подобные TOGAF и Zachman Framework. Это позволяет
разным людям с разными целями и кругозором работать вместе с целью
удовлетворения общих интересов.
«Методика трансформации в томе 9 описывает подход к проектированию архитектуры
данных в рамках проектирования архитектуры ИТ.
Проектированию архитектуры данных предшествует этап диагностики в ходе которого
выполняются следующие работы:
 Каталогизация объектов данных существующих систем.

 Анализ данных, получаемых из внешних источников.
 Анализ проектов по изменению существующих объектов данных.
 Оценка зрелости управления данными.
42
Проектирование архитектуры данных выполняется на стадиях «Дизайн» и «Реализация».
Результатами являются следующие группы элементов (артефактов) архитектуры данных:
 Модель данных предприятия.

 Анализ ценности информации.
 Диаграммы интеграции данных.
Архитектура Предприятия
Бизнес- Бизнес-
Бизнес-архитектура
Корпоративное управление
стратегия принципы
Архитектура ИТ
Управление ИТ
Архитектура Архитектура
Принципы ИТ
Стратегия ИТ
приложений данных
Технологическая архитектура
Архитектура безопасности
Пример 9.1. Архитектура данных предприятия
43
10. Применяемые инструменты и технологии
Этот раздел представляет краткий обзор классов программно-технических решений,
обеспечивающих процессы управления данными.
10.1. Решения по проектированию архитектуры данных предприятия

Входят в состав решений по проектированию архитектуры предприятия, предназначены
для проектирования концептуальной, логической и физической модели данных в составе
архитектуры данных предприятия. Позволяют сопоставить архитектуру данных с
архитектурой бизнес-процессов и архитектурой приложений.
Ключевые функции
 Создание репозитория с кастомизируемой метамоделью, которая поддерживает
как минимум:
o фрагментацию модели бизнеса и технологий;
o разрезы представлений бизнеса, информации, технологий, их отношений
зависимостей и исключений;
o различные структуры без дублирования метамодели;
o географическую/организационную многослойность.
 Возможности моделирования, которые поддерживают:
o сравнение текущей и целевой архитектуры;
o интеграцию с внешними моделями.
 Сценарный анализ и анализ пробелов.
 Визуализация и презентация модели.
 Совместная работа и доступ на ролевой основе.
Сценарии использования
 Бизнес-трансформация.
 Внедрение ERP систем.
 Внедрение концепции EA (англ. — Enterprise Architecture).
10.2. Решения по моделированию данных

Предназначены для моделирования концептуальной, логической и физической модели
данных при проектировании информационных систем и интеграционных решений.
 Поддержка всех уровней и типов моделей данных.
 Генерация новых моделей из существующих.
 Семантическая проверка моделей и их компонентов.
 Поддержка всех специфичных технологических типов объектов в физической
модели данных.
 Автоматизированная поддержка общих задач моделирования.
 Управление зависимостями между моделями и их объектами.
 Переиспользование моделей, объектов и шаблонов.
 Ведение бизнес-словаря с возможностью ссылки на бизнес-термины, используемые
в моделях.
 Импорт и экспорт моделей данных.
44
 Сравнение нескольких моделей данных.
 Совместная работа пользователей.
 Общее место хранения моделей данных с контролируемым доступом.
 Переиспользование референсных моделей и общих бизнес правил.
 Разработка программного обеспечения.
 Внедрение информационных систем.
 Проектирование интеграционных решений.
10.3. Решения по повышению качества данных

Предназначены для профилирования больших объемов данных, проверки качества
данных в соответствии с настроенными правилами проверки, обработки исключений —
данных не прошедших проверку.
Различают два класса систем по повышению качества данных, которые дополняют друг
друга: Data Quality (DQ) и Extract Transformation Load (ETL).
Ключевые функции DQ
 Профилирование данных и измерение качества данных.
 Синтаксический разбор и стандартизация.
 Очистка данных.
 Сопоставление данных (англ. — matching).
 Мониторинг качества данных.
 Разрешение проблем.
 Совместная работа пользователей.
 Обогащение данных.
 Интеграционные адаптеры.
 Развёртывание в составе SOA.
Ключевые функции ETL
 Извлечение данных из систем-источников:
o с помощью ETL;
o средствами системы-источника.
 Трансформация и очистка данных:
o преобразование структуры данных;
o агрегирование данных;
o перевод значений;
o создание новых данных;
o очистка данных.
 Загрузка данных в системы-потребители:
o поток добавления;
o поток обновления.
 Внедрение системы управления мастер-данными.
 Повышение качества транзакционных данных.
45
 Внедрение управления данными.
 Интеграция данных.
 Миграция данных.
 Управление большими данными.
10.4. Решения по управлению метаданными

Предназначены для обеспечения процессов управления метаданными.
 Организация, управление и контроль метаданных в масштабах всего предприятия:
o Поддержка целостного сопровождения и использования атрибутов данных с
помощью общей модели данных и централизованных процессов по
обслуживанию данных.
o Описание требований к качеству данных для обеспечения требуемого уровня
качества данных.
 Управление глоссарием бизнес-терминов:
o Возможность создания и управления глоссарием бизнес-терминов с
помощью веб-интерфейса.
o Хранение и применение набора стандартных бизнесалгоритмов для
исполнения процессов управления данными.
o Управление единым глоссарием и формирование отчетов о его
использовании.
 Визуализация диаграммы взаимосвязей метаданных.
 Создание, добавление, изменение и удаление объектов и иерархий.
 Динамическая и фиксированная отчётность, которые помогают отслеживать как
важные показатели, так и развитие процессов изменения данных в исторической
перспективе.
Сценарии использования.
 Внедрение управления данными
 Проектирование архитектуры данных предприятия.
 Внедрение ERP-систем.
10.5. Решения по управлению мастер-данными

Предназначены для согласования мастер-данных различных информационных систем и
создания целостного представления о материалах, клиентах, поставщиках, партнерах,
продуктах или услугах. Выделяют два типа MDM (англ. — Master Data Management) систем:
а) для управления мастер-данными клиентов;
б) для управления мастер-данными продуктов.
Также некоторые вендоры позиционируют свои решения как мульти доменные.
 Семантическое распознавание и поддержка глобальной идентификации мастер-
данных для их синхронизации.
 Создание и управление единым репозиторием мастер-данных и таблицей
переходных ключей, содержащей ссылки на записи в подключенных системах.
46
 Предоставление единой эталонной версии мастер-данных всем заинтересованным
лицам для обеспечения, бизнес-выгод организации.
 Автоматизированная проверка качества данных в ходе ведения мастер-данных
(создание, изменение, удаление/блокировка) по запросам пользователей.
 Регистрация мастер-данных.
 Консолидация мастер-данных.
 Гармонизация мастер-данных.
 Централизованное ведение мастер-данных.
10.6. Решения по управлению документами и контентом

Предназначены для обеспечения процессов управления документами и контентом.
Обеспечивают управление версиями, коллективную работу, процессы согласования
изменений, распространение обновлений подключенным системам.
 Управление документами.
 Веб-контент менеджмент.
 Управление записями.
 Обработка изображений.
 Управление социальным контентом.
 Процессы согласования изменений.
 Расширенные функции (мобильные приложения, интеграционные пакеты и др.).
 Регламентация деятельности предприятия.
 Внедрение корпоративного портала.
 Управление мультимедийными цифровыми активами.
10.7. Решения по управлению отчетностью и бизнес-аналитикой

Для управления отчетностью и бизнес-аналитикой могут быть использованы два класса
решений: хранилища данных (англ. — Data Warehouse) и управление бизнес-аналитикой
(англ. — Business Intelligence).
Хранилище данных — это предметно-ориентированная информационная база данных,
специально разработанная и предназначенная для интеграции, очистки, ретроспективного
хранения информации, предназначенной для анализа и подготовки отчётов,
обеспечивающих поддержку принятия решений в организации.
Технологии BI (англ. — Business Intelligence) — это инструменты для получения и
всестороннего анализа бизнес-данных. BI-решения обеспечивают автоматизацию
обработки любого объема информации о бизнесе. При этом, BI-средства не обязательно
должны работать в инфраструктуре хранилища данных, но в этом случае проблема очистки
и согласования данных возлагается на них.
На практике, как правило, выделяют транзакционную и аналитическую компоненту и
применение для второй различных решений по хранению данных. Для обеспечения
47
интеграции решений необходима интеграция на уровне метаданных, поэтому создание
единого бизнес-глоссария и словаря данных в его составе является фактором успеха
внедрения таких систем.
Ключевые функции хранилищ данных
 Сбор информации из различных источников
 Интеграция данных в логические модели по определенным предметным областям.
 Хранение информации таким образом, чтобы она была легко доступна и понятна
различным категориям пользователей.
 Предоставление данных разнообразным системам поддержки принятия решений.
Ключевые функции инструментов Business Intelligence
 Подключение к различным источникам данных.
 Построение как простых отчетов, так и сложных параметризированных отчетов с
комбинированной структурой и ссылочными связями.
 Интерактивная работа с данными (формирование отчетов «на лету»).
 Представление реляционных данных как многомерные.
 Запуск формирования отчетов как вручную, так и автоматически по расписанию.
 Автоматическая рассылка сформированных отчетов.
 Построение отчетов в различных форматах (XLS, HTML, PDF и т. д.).
 Управление эффективностью бизнеса.
 Прогнозирующее моделирование.
 Оперативный контроль бизнес-процессов.
10.8. Решения по управлению жизненным циклом данных

Управление жизненным циклом информации (англ. — Information Lifecycle Management
(ILM) — процесс, охватывающий весь жизненный цикл информации, от документирования
требований и моделирования данных до вывода данных из эксплуатации. Цель управления
жизненным циклом информации — оптимизация использования ресурсов хранения и
доступ к ним с минимальными затратами, поэтому часто под ILM решениями
подразумевают решения, обеспечивающие архивацию данных с возможностью
последующего доступа к этим данным.
 Оценка использования данных и бизнес-активности для оптимизации DWH.
 Определение неиспользуемой информации в системах и выделение в историческую
базу данных.
 Управление политиками сохранения данных.
 Архивирование (сжатие).
 Управление тестовыми копиями.
 Маскирование данных.
 Анализ прироста данных.
 Валидация данных, обеспечение безопасности и аудит.
 Шифрование при передаче и хранении.
48
 Вывод приложений из эксплуатации с возможностью использования их данных.
 Снижение затрат на оборудование и повышение производительности приложений.
10.9. Решения по интеграции данных

На рынке решений по интеграции данных существует очень много инструментов,
применение которых зависит от выбранной архитектуры интеграции, которая может быть
следующей:
 Консолидация.
 Федерализация.
 Распространение.
 Сервисный подход.
Ключевые функции и сценарии использования инструментов зависят от архитектуры
интеграции и не рассматриваются в настоящей книге в виду того, что в рамках Программы
трансформации решения по интеграции данных относятся к общесистемным компонентам,
а не к решениям по управлению данными.
49
11. Руководство DAMA-DMBOK Guide
DAMA-DMBOK Guide — руководство по своду знаний «Управления данными»,
разработанное международной ассоциацией по управлению данными и опубликованное
в 2009 году.
DAMA-DMBOK Guide дает практические рекомендации по управлению данными в
следующих функциональных областях:
 Координация управлением данными.

 Управление архитектурой данных.
 Подготовка данных.
 Управление базами данных.
 Управление безопасностью данных.
 Управление референсными и мастер-данными.
 Управление хранилищами данных и BI.
 Управление документами и контентом.
 Управление метаданным.
 Управление качеством данных.
Пример 11.1. Процессы управления данными DMBOK
50
Каждую функциональную область DAMA-DMBOK Guide рассматривает в контексте
следующих элементов окружения:
 Цели и принципы
 Организация и культура
 Деятельность
 Результаты
 Роли и ответственность
 Методы и подходы
 Технологии
Одним из достоинств DAMA-DMBOK Guide является его интеграция с COBIT, ITIL, TOGAF
которые являются базовыми моделями для IT процессов.
Руководство DAMA-DMBOK Guide выбрано за методологическую основу при разработке
подхода к управлению данными в рамках Программы трансформации.
Совместно с адаптацией DAMA-DMBOK Guide Центральной командой трансформации
выполняются следующие работы по совершенствованию подхода к управлению данными:
 Изучение лучших зарубежных практик.

 Анализ результатов исследований и публикаций.
 Сопоставление рекомендаций консалтинговых компаний.
 Привлечение аналитиков Gartner, как рецензентов бизнес-процессов.
 Применение правил моделирования Программы трансформации.
51
12. Стратегия управления данными портфельной компании
12.1. Общие положения
Стратегия управления данными — документ, который должен быть разработан в каждой
портфельной компании в рамках процесса Координация управлением данными.
Стратегия управления данными — это стратегический план по реализации «Референсной
модели по управлению данными», который разрабатывается с учетом бизнес-стратегии,
стратегии ИТ и должен отвечать на следующие вопросы:
 Как реализовать Референсную модель по управлению данными?

 Какие цели бизнес-стратегии и стратегии информационных технологий будут
достигнуты посредством управления данными?
 Какие этапы и сроки реализации должны быть определены?
 Какие данные наиболее важные для компании?
 Какой уровень зрелости в управлении данными и когда должен быть достигнут?
 Что должно быть сделано в рамках первого и последующего этапов:
o в части повышения качества данных?
o в части внедрения процессов управления данными?
o в части вовлечения бизнеса в процессы управления данными?
o в части изменения организационной структуры?
o в части внедрения инструментов управления данными?
o в части разработки/развития методов и подходов?
o в части накопления экспертизы?
 На кого возлагается ответственность за реализацию Стратегии?
 Какой бюджет необходимо выделить на реализацию Стратегии?
В ходе разработки Стратегии управления данными, объекты данных должны быть
проранжированы по критичности для бизнеса компании. Должен быть сформирован
Реестр управляемых объектов данных, в который, в ходе реализации Стратегии, будут
добавляться объекты данных по мере включения их в рамки Управления данными.
Пример 12.1. Этапы построения функции управления данными
52
Инфографика в Примере 12.1. отражает этапы построения функции управления данными.
За этап может быть выбран финансовый или календарный год, или этап внедрения ERP-
системы.
12.2. Ранжирование объектов данных по критичности для бизнеса

Чтобы понять, насколько конкретный объект данных важен для бизнеса, необходимо
обратиться к архитектуре данных предприятия, в составе которой должны быть матрицы –
элементы анализа ценности информации:
 Матрица Объект данных/KPI (KPI может иметь различный вес).

 Матрица Объект данных/Документ.
 Матрица Объект данных/Бизнес-функция.
 Матрица Объект данных/Информационная система.
 Матрица Объект данных/Роль (англ. — CRUD).
 Матрица Объект данных/Организационная единица.
Также, при определение наиболее критичных объектов данных следует обратить
внимание на следующие данные:
 данные, участвующие в формировании финансовой отчетности;

 данные, на основе которых принимаются решения по инвестированию;
 данные, к котором предъявлены требования внешних регулирующих органов;
 данные, на которые обращает внимание топ-менеджмент;
 данные, используемые высокоприоритетными проектами;
 мастер-данные ERP системы и других проектов трансформации;
 кросс-функциональные мастер-данные, интегрированные по различным системам;
 данные, определенные как наиболее критичными бизнес-кураторами данных.
53
13. Факторы успеха управления данными
Портфельным компаниям при организации управления данными рекомендуется принять
во внимание следующие факторы успеха, которые определены на основе лучших
зарубежных практик и личного опыта сотрудников Центральной команды трансформации:
 Поддержка руководства на всех уровнях.

 CIO поддерживает но НЕ отвечает за управление данными.
 Формирование единого координирующего органа — Офиса управления данными.
 Внедрение специализированных инструментов по управлению данными.
 Поддержка архитектуры данных предприятия в актуальном состоянии.
 Измерение результатов: как повышение качества данных отражается на KPI?
 Постоянная просветительская работа о деятельности по управлению данными.
 Обмен передовым опытом с другими компаниями.
 Мотивационная схема для вовлеченных сотрудников.
 Обучение и сертификации специалистов.
54
14. Примеры лучших зарубежных практик
Управление данными является распространенной практикой в западных странах уже много
лет, и компаний, успешно внедривших подходы к управлению данными, довольно много.
Поэтому, чтобы ограничить список, приведем перечень компаний, номинированных на
присуждение премии Gartner Enterprise Information and Master Data Management (MDM)
Excellence Award.
Данная премия присуждается лучшей компании, которая по итогам года достигла
значительных результатов в области управления данными. Gartner проводит оценку
компаний в соответствии с семью основными компонентами управления данными:
 Vision — Концепция.
 Strategy — Стратегия.
 Metrics — Метрики.
 Governance — Процессы управления.
 Organization — Организация.
 Information Lifecycle — Жизненный цикл информации.
 Information Infrastructure — Инфраструктура информации.
Компаний, номинированные в разные годы на присуждение премии Gartner Enterprise
Information and Master Data Management (MDM) Excellence Award:
Asian Paints Limited

Индийская химическая компания с штаб-квартирой в
Мумбаи, Индия. Производит краски для декоративного и
промышленного использования. Является крупнейшим
производителем красок в Индии, и третьим по величине в
Азии с годовым оборотом 140 миллиардов рупий (2,11
млрд долларов США).
BP
Британская нефтегазовая компания со штаб-квартирой в
Лондоне. Одна из семи крупнейших в мире нефтегазовых
компаний. Вертикально интегрированная компания,
работающая во всех областях нефтяной и газовой
промышленности, в том числе разведки и добычи,
переработки, распределения и сбыта, нефтехимии,
энергетики и торговли.
Daymon Worldwide
Компания, предлагающая услуги по созданию и поддержке
ретейлингового бизнеса. Имеет широкий спектр услуг, в том
числе, создание и развитие коммерческого бренда,
разработка стратегии, услуги сорсинга и логистики, услуги
мерчандайзинга и маркетинга.
55
Fedex
Американская компания, предоставляющая почтовые,
курьерские и другие услуги логистики по всему миру.
Входит в список Fortune 1000 по итогам 2012 года (70—е
место).
GSK
Британская фармацевтическая компания, одна из
крупнейших в мире. Кроме фармацевтики, компания
занимается микробиологией и товарами по уходу за телом.
Основные производственные мощности сконцентрированы
в Великобритании, Испании, Ирландии, США и Сингапуре.
Heineken
Нидерландская пивоваренная компания, крупнейшая в
стране. Штаб-квартира — в Амстердаме. Помимо всемирно
известных марок Heineken и Amstel, компания выпускает
свыше 170 международных и локальных марок пива, среди
которых Cruzcampo, Tiger, Żywiec, Birra Moretti, Murphy’s,
Star и др.
Johnson & Johnson Health Care Systems

Дочерняя компания Johnson & Johnson. Осуществляет
управление учетными записями, заключение договоров,
управление цепочками поставок и бизнес-услугами в
больницах, закупки для медицинских учреждений,
предлагает логистические услуги по транспортировке
различных продуктов.
Mondelēz International (ранее Kraft Foods Inc.)

Международная компания по производству шоколада,
печенья и крекеров, жевательной резинки, леденцов, кофе
и растворимых напитков. Глобальный портфель снеков
дополняют ведущие бренды кофе и растворимых напитков,
такие как Jacobs, Carte Noire, Tassimo и Tang и мягкий сыр
Philadelphia.
Lexmark International
Американская корпорация, специализирующаяся на
разработке и изготовлении устройств для печати и
обработки изображений (включая лазерные и струйные
принтеры и многофункциональные устройства), на
создании решений и предоставлении услуг в этой области
организациям и физическим лицам.
56
Merck & Co
Крупнейшая международная научно–исследовательская,
фармацевтическая компания со штаб-квартирой в США.
Компания известна разработкой и продажей вакцин и
других лекарств, а также публикацией на некоммерческой
основе информации о здравоохранении и здоровье.
Michelin
Французская компания, производитель шин. Выпускает
широкий спектр шинной продукции для автомобильной,
сельскохозяйственной техники, велосипедов и мотоциклов,
а также самолётов. Компании принадлежит 69 заводов в 19
странах.
State Street
Американский холдинг, предлагающий финансовые услуги
по всему миру. Компания была основана в 1792 году. Три
основные направления деятельности: банковские услуги,
услуги по управлению инвестициями, инвестиционные
исследования и торговые услуги для инвесторов.
SwissRe
Швейцарское перестраховочное общество — одна из
крупнейших перестраховочных компаний в мире. Была
основана в 1863 году. Штаб-квартира компании находится в
Цюрихе, Швейцария.
W.W. Grainger, Inc.

Промышленная компания, входящая в список Fortune 500,
основанная в 1927 году в Чикаго. Производит
электродвигатели, системы освещения, обработки
материалов, крепеж, сантехнику, инструменты, расходные
материалы и средства защиты.
xpedx
Американская компания, предлагающая услуги в сфере
промышленной упаковки продуктов, включая упаковку и
доставку материалов, розничные поставки упаковки и
оборудования по упаковке пищевых и промышленных
продуктов.
57

CTT.ITT - РМ по управлению данн (1) RU

Загружено:

Авторское право:

Доступные форматы

CTT.ITT - РМ по управлению данн (1) RU

Загружено:

Сведения о документе

Оригинальное название

Авторское право

Доступные форматы

Поделиться этим документом

Поделиться или встроить документ

Параметры публикации

Этот документ был вам полезен?

Это неприемлемый материал?

Авторское право:

Доступные форматы

CTT.ITT - РМ по управлению данн (1) RU

Загружено:

Авторское право:

Доступные форматы

Приложение №1

3. Структура книги ........................................................................................................................ 4

4. Предпосылки управления данными ........................................................................................ 5

5. Данные как объект управления ............................................................................................. 10

6. Управление данными как бизнес—функция ......................................................................... 17

7. Подход к управлению данными ............................................................................................ 21

8. Процессы управления данными референсной модели ......................................................... 33

9. Архитектура данных предприятия ......................................................................................... 42

10. Применяемые инструменты и технологии............................................................................. 44

11. Руководство DAMA-DMBOK Guide .......................................................................................... 50

12. Стратегия управления данными портфельной компании ..................................................... 52

13. Факторы успеха управления данными................................................................................... 54

14. Примеры лучших зарубежных практик ................................................................................. 55

CMS Класс информационных систем, используемых для обеспечения в

DAMA-DMBOK DAMA International Guide to Data Management Body of Knowledge

Gartner Исследовательская и консалтинговая компания,

MDM Набор дисциплин, процессов и технологий для обеспечения

Архитектура данных Набор документов (каталоги, матрицы, диаграммы), которые

Куратор данных Роль ответственного сотрудника бизнес-подразделения, который

Объект данных Совокупность данных (записей), представляющих определенную

Управление данными Дисциплина, методология, а также совокупность процессов по

 разработку и постоянную поддержку архитектуры данных предприятия;

 разработку и внедрение единых принципов, стандартов, политики, процессов и

 вовлечение руководителей и сотрудников бизнес-подразделений в процессы

 обеспечение управления качеством данных на основе экономической

 внедрение инструментов, обеспечивающих процессы управления данными,

 принципы и цели управления данными;

 процессную модель управления данными;

 роли и ответственность участников;

 показатели эффективности и метрики качества данных;

 соответствующие технологии и их основные функции;

 организовать управление данными внутри портфельных компаний;

 повысить качество данных в информационных системах;

 обеспечить прозрачность и эффективное функционирование бизнес-процессов.

Данные — объект Ценность данных, как информационных активов, типы данных, 10

Подход к управлению Бизнес-принципы, организационная и функциональная 21

Процессы управления Краткое описание процессов управления данными: назначение, 33

Архитектура данных Краткое описание подхода к проектированию архитектуры 42

Применяемые Назначение, ключевые функции и сценарии использования 44

Руководство DAMA - Обзор DAMA-DMBOK Guide, его применение для разработки и 50

Стратегия управления Общее описание требований к документу с перечнем вопросов на 52

Факторы успеха Факторы успеха, которые рекомендуется принять во внимание 54

Примеры лучших Перечень компаний, номинированные на присуждение премии 55

4.1. Проблемы качества данных в информационных системах

Неполнота Фонд оплаты труда в компании Различная методика вычисления

Дублирование Клапан 15нж65нж Ду15 Ру16 Искажение информации о фактическом

4574914 ТОО КАЗРОСИМПОРТ Затруднен поиск записей, искажение

Неполнота мастер Абдыкаримов Д.Ж. ____________ — Затруднена идентификация клиентов,

Неактуальность МАНОМЕТР МТП-100-16 — Ошибки при формировании плана закупок

Львова Светлана Викторовна — Ошибки при доставке корреспонденции,

Дублирование и Регламент взаимодействия.doc — Затруднение поиска актуальных документов

Недооценка значимости качества данных и Необходимо рассматривать данные как

Отсутствие единой структуры данных, определяющей Требуется единая структура иерархии

Отсутствие методической и регламентирующей Требуется методическая и регламентирующая

Фонд и портфельные компании применяют различные Требуется единые бизнес-термины и единые

Отсутствие центра компетенций по управлению Требуется бизнес-владелец процесса по

Отчетность для руководства сдается с использованием Требуется автоматизация процессов

Уровень 1 Осведомленный На «Уровне «1 организация достигает некоторой

Уровень 2 Реактивный На «Уровне 2», бизнес и IT-руководители