Хранилище Данных как залог порядка

Для всеобъемлющего контроля над ходом выполнения проектов или текущей операционной деятельностью руководству крупных компаний необходима надёжная система сбора и агрегации данных. Хранилище Данных содержит упорядоченную информацию по всем департаментам и продуктам компании, и позволяет своевременно реагировать на возникновение внештатных ситуаций.

Вечно актуальная тема

Хранилище Данных (англ. Data Warehouse) - это память организации. Это база данных, содержимое которой унифицировано для удобной подготовки отчётов и бизнес-анализа с целью поддержки принятия решений. Правильно организованное хранение данных даёт возможность быстро находить необходимую информацию и эффективно использовать её для текущих работ, отчётов и прогнозов. Хранилище данных открывает дорогу к визуализации данных.

Тематическое исследование

Гипотетическая крупная компания стоит перед выбором внедрения Хранилища Данных. Каждый месяц возникает потребность в привлечении материальных и человеческих ресурсов для составления сотен докладов для клиентов, структурных подразделений и руководства. Информация собирается из различных систем. Управление рисками, торговля, соответствие, операционная деятельность, финансы и иные системы. Данные оттуда копируются в Excel для подсчёта, служа источником для докладов в PowerPoint и PDF.

Подсчитаем операционные расходы. Предположим, компанией используется восемь систем со стоимостью пользовательской лицензии 200 USD в месяц, а команда насчитывает 10 человек. Лицензионные расходы: 8 x 200 x 12 x 10 = 16,000 в месяц x 12 месяцев = 192,000 USD в год, что в общем составляет 200,000 USD. Зарплата специалистов: 60,000 USD x 10 = 600,000 USD в год. Таким образом, общие расходы компании составляют 800,000 USD в год.

Если руководство компании принимает решение о внедрении Хранилища Данных, стоимость обслуживания которого для данной компании составляет 500,000 USD в год, становится возможным собрать воедино данные из 8 вышеназванных систем в одну базу данных, устраняя необходимость постоянно переключаться между разными системами. Это изменение даёт компании 200,000 USD чистой экономии в год. Кроме того, Хранилище Данных позволяет автоматизировать производство отчётов и уменьшает влияние человеческого фактора в виде случайных или намеренных ошибок при вводе данных. Эти меры помогают уменьшить объёмы времени, необходимые на подготовку отчётов, что даст возможность решать эти задачи гораздо меньшими человеческими ресурсами. Предположительно, успешная автоматизация хотя бы 50% отчётной деятельности позволит сэкономить около 300,000 USD в год.

Итого, общая экономия от внедрения Хранилища Данных составила 500,000 USD в год, что при сопоставимой цене проекта и с учётом роста перспектив компании, делает упомянутую модернизацию более чем оправданной.

Хранилище Данных помогает держать информацию о годах работы компании и бизнес-аналитической информации в досягаемости одного запроса.

Оптимизация

Архитектуры Хранилищ Данных непрерывно эволюционируют, чтобы поддерживать новые технологии и отвечать запросам бизнеса, а также соответствовать требованиям времени в век больших данных и бизнес-аналитики. Этот процесс стал известен как Оптимизация Хранилищ Данных. Каждая организация и её Хранилище Данных (если установлено) - это уникальный случай и, соответственно, её программа оптимизации - тоже.

Сценарии оптимизации могут разниться от базового улучшения программного обеспечения и оборудования до периодического добавления новых прав субъектов персональных данных, источников и масштабов. Однако, в силу разнообразия типов данных и их объёмов, модернизация требует от пользователей поддержки различных типов платформ для параллельной работы с большими объёмами данных из разных источников. Совокупно это обозначается термином Пользовательское Портфолио.

Для руководителей крупных организаций важнейшей чертой Хранилища Данных является прозрачность всех подотчётных внутренних процессов и, как следствие существенное уменьшение издержек.

По мере роста Пользовательских Портфолио, большая часть Хранилищ Данных эволюционируют в сложные гибридные мультиплатформенные программные среды. Такие среды оптимизируются под актуальные требования к использованию больших данных, бизнес-аналитики и высокой производительности в режиме реального времени с расчётом на пиковые нагрузки. Такие системы должны способствовать оптимизации контроля затрат организации.

Каждое Хранилище Данных предоставляет множество путей для начала или расширения использования последних технологических новшеств, среди которых: технологии Вычисления в оперативной памяти, Аналитическая обработка данных, Массивно-параллельная вычислительная работа, Мультиплатформенные федеративные запросы, Hadoop и многое другое. Применению передовые мировых практик также способствует внедрение Бережливой, Логической и Виртуальной методик.

Бизнес-аналитика как таковая сейчас переживает эпоху модернизации. Для применения передовых бизнес-аналитических практик, таких как виртуализация, “добыча данных” и самообслуживание систем, требуются Хранилища Данных. Вслед за передовым корпорациями, многие западные крупные компании сейчас усиленно инвестируют в онлайновую аналитическую обработку данных (OLAP).

Хранилище Данных не является статичной системой и способно развиваться вместе с предприятием.

Просто о сложном

Популярные технологии вычисления в оперативной памяти могут быть быстрыми и простыми в реализации, им недостает преимуществ стандартного Хранилища Данных, таких как возможность управления данными, контроль их качества и общая надёжность системы. Хранилище Данных позволяет управлять большими объёмами данных (data governance) и помогает увеличить скорость исполнения запроса до 1-3 сек. против 20-30 сек. для систем типа Озеро Данных (Data Lake). Хранилище Данных даёт возможность развивать и поддерживать собственную корпоративную базу данных, нивелируя ручной труд по их обработке и автоматизируя рутинные задачи.

Ценностные преимущества

  • Анализ пост-фактум
    Хранилище данных содержит в себе информацию обо всех аспектах деятельности компании. Благодаря этому, руководство компании может проводить анализ исторических данных для предотвращения повторения ошибок и уменьшения будущих рисков.
  • Прогнозирование
    На основе больших объёмов данных в системе Хранилища Данных возможно выполнение Предикативного статистического анализа с целью прогнозирования событий с заданной точностью.
  • Все данные в одном месте
    Бизнес-аналитика даёт возможность аккумулировать информацию из различных источников данных, как внешних, так и внутренних. Это качество жизненно-необходимо для руководства крупных компаний, так как это позволяет видеть бизнес в деталях, как изнутри, так и совокупно.
  • Надёжная миграция данных
    Некоторые компании склонны затягивать модернизацию программного обеспечения из опасения потерять ценную бизнес-информацию, хранящуюся в старых программах. Хранилище Данных позволяет выполнить безопасную миграцию данных из старых систем для отделения операционных данных от аналитических. Данные, перенесённые в Хранилище Данных из старых систем, всегда могут быть загружены в новые операционные системы.
  • Безопасность
    Внедрение Хранилища Данных позволяет компания надёжно защитить свои важнейшие бизнес-приложения, программы и содержащиеся в них данные, ускорить время и эффективность восстановления после сбоев и существенно сократить расходы на обеспечение безопасности данных.

Читайте также на Perfico