Хранилища данных. 
Информационные системы и технологии в экономике и управлении в 2 ч. Часть 1

Специфика КИС проявляется, в первую очередь, благодаря новой форме организации внутримашинной информационной базы, представляющей совокупность взаимосвязанных компонентов (рис. 8.2):

Рис. 8.2. Новая форма организации внутримашинной информационной базы

• • операционная БД — служит для обеспечения работы функциональных модулей ERP-системы, составляет основу OLTP-системы обработки данных КИС;
• • специализированные ХД (Data Warehouse — DW), основа OLAP-систем обработки данных для различных функциональных компонентов КИС.

Операционные БД КИС обеспечивают хранение данных большого объема и сложной логической структуры, находятся под управлением мощных СУБД, как правило, реляционного типа (ORACLE, MS SQL Server, Informix, DB/2 и др.). Такие БД используются в составе многоуровневой клиент-серверной архитектуры КИС; они могут размещаться на одном или нескольких серверах БД. Как правило, БД отделены от программ функциональных модулей, использующих эти данные. Интерфейс пользователя (формы, отчеты, запросы и т.и.) находится на рабочей станции или специализированном сервере.

Основными проблемами ведения операционных БД КИС являются:

• • обеспечение необходимого уровня производительности КИС (измеряется количеством транзакций в единицу времени) для реализации регламентированных приложений КИС;
• • соответствие требованиям приложений, но составу, структуре, объемам данных, времени получения и качеству выходной информации;
• • обеспечение надежного хранения данных (периодическое архивирование БД, восстановление БД после сбоев из страховых копий, ведение журнала транзакций для их «отката» и т. п.).

Операционную БД вместе с внешними информационными источниками следует рассматривать как «сырье» для создания предметноориентированных, интегрированных, неизменяемых по структуре хронологических данных — ХД, анализируемых в системах поддержки принятия решений. Витрина (киоск) — подмножество ХД, обеспечивает необходимую производительность получения и анализа данных для конечных пользователей и защиту от несанкционированного доступа.

По определению Б. Инмона, хранилище данных — это предметно-ориентированный, интегрированный, неизменяемый, поддерживающий хронологию набор данных, организованный для целей поддержки принятия решений. Как правило, ХД ориентированы на решение определенных задач анализа и представления данных. В ХД имеются три категории данных:

• • метаданные (сведения об источнике, методах сбора информации);
• • детальные;
• • агрегированные (сводные).

Программное обеспечение ХД обеспечивает: загрузку, форматирование, анализ и реструктуризацию данных; управление доступом к ним; построение витрин данных.

Хранилища данных являются одним из крупнейших источников информации для современных аналитиков. По оценке «Gartner», хранилища в ближайшей перспективе останутся одними из ключевых компонентов ИТ-инфраструктуры предприятий. Аналитики выделили ряд наиболее значимых тенденций на рынке хранилищ на ближайшую перспективу.

Консалтинговая компания «Gartner» выделила следующие ключевые тенденции на рынке хранилищ данных за период 2011—2012 гг.:

• • рост производительности и оптимизация хранения данных за счет сжатия и стратегий размещения используемых данных;
• • специализированное оборудование ХД;
• • интенсивный РОС (proof of concept — проверка концепций), выбор поставщиков СУБД для хранилища;
• • администрирование разнородных рабочих нагрузок (массовая/ пакетная нагрузка, основная отчетность, базовая оперативная аналитическая обработка — OLAP, нагрузка в реальном времени/ продолжительные нагрузки, интеллектуальный анализ данных и операционный бизнес-анализ);
• • анимация витрин данных для оптимизации ХД;
• • новый класс поколоночных (column-based) СУБД для витрин данных и СУБД с технологией «In-memory» для повышения скорости ответов на запросы и фиксацию данных;
• • хранилище как услуга и «облако»: программное обеспечение как услуга (SaaS) и внешнее (аутсорсинговое) ХД;
• • СУБД «Open Source» («свободные СУБД») для развертывания хранилищ.