Базы данных
<<  Хранилища данных Нормативная база промежуточной аттестации  >>
Хранилища данных
Хранилища данных
Данные хранилища Компоненты хранилища
Данные хранилища Компоненты хранилища
Данные хранилища
Данные хранилища
Источники данных
Источники данных
Хранилища данных (в узком смысле)
Хранилища данных (в узком смысле)
Оперативный склад данных
Оперативный склад данных
Оперативный склад данных (продолжение)
Оперативный склад данных (продолжение)
Оперативный склад данных (продолжение)
Оперативный склад данных (продолжение)
Витрины данных (data mart)
Витрины данных (data mart)
Витрины данных (продолжение)
Витрины данных (продолжение)
Метаданные — это любые данные о данных
Метаданные — это любые данные о данных
Компоненты хранилища
Компоненты хранилища
Подсистема загрузки данных
Подсистема загрузки данных
Подсистема загрузки данных (продолжение)
Подсистема загрузки данных (продолжение)
Подсистема обработки запросов и представления данных
Подсистема обработки запросов и представления данных
Подсистема администрирования хранилища
Подсистема администрирования хранилища
Спасибо за внимание
Спасибо за внимание

Презентация на тему: «Хранилища данных». Автор: Антон Кудинов. Файл: «Хранилища данных.pps». Размер zip-архива: 370 КБ.

Хранилища данных

содержание презентации «Хранилища данных.pps»
СлайдТекст
1 Хранилища данных

Хранилища данных

Лекция 2. Структура хранилища

Антон Викторович Кудинов, доцент кафедры ВТ

2 Данные хранилища Компоненты хранилища

Данные хранилища Компоненты хранилища

Содержание

2

3 Данные хранилища

Данные хранилища

Источники данных хранилища данных (в узком смысле) оперативный склад данных витрины данных метаданные

3

4 Источники данных

Источники данных

Источники - оперативные транзакционные системы, внешние системы, Интернет и т.д. Необходимость использования той или иной системы в качестве источника определяется бизнес-требованиями к СППР Детальные данные из источников могут либо напрямую поступать в хранилище, либо предварительно агрегироваться до требуемого уровня обобщения

4

5 Хранилища данных (в узком смысле)

Хранилища данных (в узком смысле)

предметно-ориентированная база или совокупность БД, извлекаемых из источников, которые организованы по сегментам, отражающим конкретную предметную область бизнеса.

5

6 Оперативный склад данных

Оперативный склад данных

Operational Data Store – ODS Технологический элемент хранения данных в СППР, который служит буфером между транзакционными источниками данных и хранилищем Данные, прежде чем попасть в хранилище, должны быть преобразованы в единые форматы, очищены, объединены и синхронизированы В отличие от хранилища данных информация в складе данных может изменяться со временем в соответствии с изменениями, происходящими в источниках данных

6

7 Оперативный склад данных (продолжение)

Оперативный склад данных (продолжение)

Идентичность оперативного склада и хранилища данных состоит в их предметной ориентированности и хранении детальных данных Отличие от хранилища данных состоит в том, что оперативный склад данных: имеет изменяемое содержимое, содержит только детальные данные, содержит текущие значения данных

7

8 Оперативный склад данных (продолжение)

Оперативный склад данных (продолжение)

Детальные данные — это данные из оперативных и внешних систем, не подвергавшиеся операциям обобщения, суммирования, т.е. данные, не изменившие своей семантики. Из оперативных систем и внешних источников данные поступают в оперативный склад, проходя процессы трансформации Каждый раз, когда данные изменяются в оперативных системах и внешних источниках, соответствующие им данные из оперативного склада также должны быть изменены Частота обновления оперативного склада зависит как от частоты обновления источников, так и от регламента загрузки данных в склад

8

9 Витрины данных (data mart)

Витрины данных (data mart)

Представляют собой структуры данных, обеспечивающие решение аналитических задач в конкретной функциональной области или подразделении компании, например управление прибыльностью, анализ рынков, анализ ресурсов и проч. (киоски данных) «маленькие хранилища», которые создаются с целью информационного обеспечения аналитических задач конкретных управленческих подразделений компании содержит значительно меньше данных охватывает всего несколько предметных областей имеет более короткую историю

9

10 Витрины данных (продолжение)

Витрины данных (продолжение)

Можно представить в виде логически или физически разделенных подмножеств хранилищ данных Обычно они строятся для обслуживания нужд определенной группы пользователей Источником данных для витрин служат данные хранилища, которые, как правило, агрегируются и консолидируются по различным уровням иерархии Детальные данные могут также помещаться в витрину или присутствовать в ней в виде ссылок на данные хранилища Различные витрины данных содержат разные комбинации и выборки одних и тех же детализированных данных хранилищ

10

11 Метаданные — это любые данные о данных

Метаданные — это любые данные о данных

С точки зрения пользователей: метаданные для бизнес-аналитиков метаданные для администраторов метаданные для разработчиков С точки зрения предметных областей: структуры данных хранилища модели бизнес-процессов описания пользователей технологические и прочие С точки зрения функциональности системы: метаданные о процессах трансформации метаданные по администрированию системы метаданные о приложениях метаданные о представлении данных пользователям

11

12 Компоненты хранилища

Компоненты хранилища

Хранилище на самом верхнем уровне состоит, как правило, из трех подсистем: подсистемы загрузки данных подсистемы обработки запросов и представления данных подсистемы администрирования хранилища

12

13 Подсистема загрузки данных

Подсистема загрузки данных

Представляет собой ПО, которое в соответствии с определенным регламентом извлекает данные из источников и приводит их к единому формату, определенному для хранилища Отвечает за формализованную логическую согласованность, качество и интеграцию данных, которые загружаются из источников в оперативный склад данных Каждый источник данных требует разработки собственного загрузочного модуля. Каждый модуль должен решать два класса задач: начальной загрузки ретроспективных данных регламентного пополнения хранилища данными из источников

13

14 Подсистема загрузки данных (продолжение)

Подсистема загрузки данных (продолжение)

По регламенту извлекает детальные данные из оперативного склада, производит их агрегирование, консолидацию, трансформацию и помещает данные в хранилище и витрины данных Именно в данной подсистеме должны быть определены все бизнес-модели консолидации данных по иерархическим измерениям и вычисления зависимых бизнес-показателей по независимым исходным данным

14

15 Подсистема обработки запросов и представления данных

Подсистема обработки запросов и представления данных

Для извлечения данных, их аналитической обработки и представления конечным пользователям служит специальное ПО. Как правило, можно выделить три типа данного ПО: Программное обеспечение регламентированной отчетности (ROLAP) Программное обеспечение нерегламентированных запросов пользователей (MOLAP) Программное обеспечение добычи знаний

15

16 Подсистема администрирования хранилища

Подсистема администрирования хранилища

Администрирование данных Администрирование хранилища данных Администрирование доступа к данным Администрирование метаданных системы

16

17 Спасибо за внимание

Спасибо за внимание

KudinovAV@tpu.ru

17

«Хранилища данных»
http://900igr.net/prezentacija/informatika/khranilischa-dannykh-234974.html
cсылка на страницу
Урок

Информатика

130 тем
Слайды