Данные поступают отовсюду, они повсюду, что же с этим делать? Для многих организаций ответом является консолидация данных, считают опрошенные порталом InfromationWeek эксперты.

Поскольку данные поступают из, казалось бы, бесконечного множества источников, ИТ-руководители сталкиваются с проблемой предоставления актуальных данных тем, кто в них больше всего нуждается, включая финансовых аналитиков, специалистов по планированию и продажам.

Консолидация позволяет оптимизировать повседневную работу за счет сбора данных из разрозненных источников и их централизованного хранения. Цель — улучшить качество данных, повысить их безопасность и облегчить жизнь пользователям данных. Консолидация данных улучшает управление данными, объединяя информацию из различных источников в единую и всеобъемлющую картину, говорит Шиксианг (Вуди) Чжу, доцент Колледжа информационных систем и государственной политики имени Хайнца Университета Карнеги-Меллона: «Это значительно повышает целостность данных, помогает делать обоснованный выбор, оптимизирует администрирование данных и, помимо прочих преимуществ, усиливает их защиту».

Консолидация данных необходима для обеспечения доверия при принятии решений, отмечает Раймонд Велес, технический директор по клиентским данным консалтинговой компании Publicis Sapient. «По мере того как к крупным организациям предъявляется все больше нормативных требований, консолидация данных и управление ими могут помочь гарантировать, что команды смогут избежать штрафов и безопасно обращаться с данными потребителей», — отмечает он и добавляет, что без консолидации данных многочисленные и дублирующие друг друга источники данных, разбросанные по организации, могут затруднить поиск единого источника истины.

Растущее внедрение облачных технологий также обусловливает необходимость консолидации данных. «В облаке вы получаете больше данных из большего количества источников, которые могут быть использованы для получения инсайтов, принятия важных бизнес-решений или поддержки новых технологий, — говорит Салим Сайед, вице-президент компании Capital One Software. — При таком большом объеме данных, поступающих из различных облачных источников, достижение скорости и масштаба может стать сложной задачей без консолидации».

Многочисленные преимущества

К преимуществам консолидации данных относятся повышение доверия и прозрачности, соответствие нормативным требованиям и повышение эффективности. «При наличии программ консолидации данных организации могут избежать дублирования усилий и повысить качество данных», — говорит Велес.

По словам Сайеда, при правильном подходе консолидация данных облегчает конечным пользователям поиск, доступ и использование данных благодаря их единообразному представлению: «Потребители данных могут быстро и в больших масштабах использовать высококачественные, хорошо управляемые данные для принятия стратегических решений».

Внедрение консолидации данных требует тщательного планирования, начиная с четкого определения целей и всесторонней инвентаризации источников данных. «Очистка и стандартизация данных имеют решающее значение для согласованности различных наборов данных, что требует выбора подходящих средств и технологий интеграции, обеспечивающих масштабируемость и производительность», — говорит Чжу. Для получения максимального эффекта от консолидации также необходимо обучение пользователей. Для обеспечения долгосрочного успеха консолидации Чжу рекомендует провести анализ результатов после внедрения и взять на себя обязательства по постоянному совершенствованию.

С чего начать

Консолидация данных требует тщательного планирования, говорит Кэти Руди, руководитель отдела данных и аналитики консалтинговой компании ISG. «Лучшая и самая важная причина для консолидации источников данных — это предоставление организации более качественных, новых и значимых данных, — поясняет она. — Если консолидация позволяет получать более значимые инсайты и создавать дополнительную ценность из разрозненных источников данных, она становится приоритетной задачей».

Консолидация данных обычно основывается на подходе ETL (извлечение, преобразование, загрузка). Такие методы позволяют организациям модернизировать управление данными с помощью облачных подходов, которые используют ETL для управления выводом и вводом данных на различных уровнях адаптации, включая традиционные хранилища данных и современные озера данных.

По словам Руди, важно создать условия для сотрудничества между ИТ- и бизнес-руководителями. «Бизнес, как правило, владеет данными, а на ИТ-службу обычно возлагается задача их консолидации», — отмечает она. По ее словам, без участия бизнеса в обсуждении того, как используются данные, почему они могут быть более ценными в консолидированном состоянии, а также без общего признания того, что эта деятельность принесет пользу, путь будет нелегким: «С прагматической точки зрения следует рассмотреть вопрос о том, как подходить к качеству данных, вопросам безопасности, технологическим требованиям и любым организационным изменениям в результате консолидации».

Потенциальные проблемы

По словам Чжу, одной из самых больших ошибок при консолидации данных является пренебрежение качеством и согласованностью данных в различных наборах: «Эта ошибка может возникнуть, когда недостаточно внимания уделяется очистке и подготовке данных перед консолидацией».

По словам Велеса, одной из наиболее часто игнорируемых потребностей при консолидации данных является эффективное управление. «Создание организации с различными определенными ролями и потребностями имеет решающее значение для консолидации данных, — поясняет он. — В противном случае эти усилия не увенчаются успехом».

Сайед заключает, что начинать консолидацию данных никогда не бывает слишком рано: «Консолидировать данные гораздо проще с самого начала, поэтому целью должно быть создание механизмов организации данных на ранних этапах, например, в начале миграции в облако или при вводе новых данных в более широкий спектр корпоративных систем».