Исследование и анализ методов оптимизации архивного хранения больших объёмов данных

Цель данной работы: Исследовать и проанализировать методы оптимизации архивного хранения больших объёмов данных, изучить понятие баз данных и их разработку, изучить их архитектуру и конфигурацию.

Работа состоит из введения, трех глав, заключения и списка использованных источников.

Квалификационная работа содержит 73 страницы машинописного текста (без приложений), 18 рисунков, 30 наименований списка использованных источников.

Согласно цели работы, сформулированы следующие задачи:

1. Рассмотреть понятие хранилища данных.

2. Изучить принципы построения хранилищ данных.

3. Рассмотреть технологии управления информацией.

4. Изучить понятие баз данных и их разработку.

5. Проанализировать многообразие выбора.

6. Исследовать архитектуру и конфигурацию

7. Провести анализ и оптимизацию системы хранения больших данных.

Введение………………………………………………………………………..............................5

1 Принципы построения хранилищ больших данных………………………6

1.1 Понятие хранилища данных………………………………………………..............6

1.2 Принципы построения хранилищ данных………………………………....14

1.3 Технологии управления информацией………………………………….......21

1.4 Понятие баз данных и их разработка……………………………………......29

2 Используемые технологии…………………………………………………...............39

2.1 Многообразие выбора…………………………………………………….................39

2.2 Архитектура и конфигурация…………………………………………….............50

3 Анализ и оптимизация системы хранения больших данных……61

3.1 Хранилища больших объёмов данных………………………………….......61

3.2 Оптимизация хранения данных…………………………………………...........66

Заключение……………………………………………………………………..........................70

Список использованных источников………………………………………..........73

1. Чугунов А.В., Кузьмин А.Н., Ризаев И.С. Концепции построения электронного документооборота // Труды 5-й международной конференции молодых учёных и студентов. Естественные науки. Часть 18-Б, Секция: информатика, выч. техника и управление, Самара, 2004. - С.94-96.

2. Кузьмин А.Н., Сапаркин П.В. Технология хранилищ данных // Туполевские чтения: международная молодёжная научная конференция, посвящённая 1000-летию города Казани, Том 3, Казань, Изд-во Казан. гос. техн. ун-та, 2005. - С.133-134.

3. Кузьмин А.Н., Ризаев И.С. Методы устранения избыточности в банковских данных // IV Спиридоновские чтения. Актуальные проблемы современной экономики России: международная научно-практическая конференция, Казань, Изд-во Казан. гос. техн. ун-та, 2006. - С.148-150.

4. Кузьмин А.Н. Проблемы реляционных баз данных в банковских системах, математические модели хранилищ данных и параллельной загрузки // Препринт 06П1, Казань, Изд-во Казан. гос. техн. ун-та, 2006. - 12C.

5. Кузьмин А.Н., Ризаев И.С. О внедрении современных информационных технологий в сферу управления банком // Исследования по информатике, Выпуск 10, Институт проблем информатики АН РТ, Казань: Отечество, 2006. - С.151-158.

6. Кузьмин А.Н. Применение вероятностных методик Байеса и нейронных сетей в системах поддержки принятия решении на основе хранилищ данных // Материалы региональной научно-практической конференции, Казань, Изд-во Казан. гос. техн. ун-та, 2006. - С.108-110.

7. Кузьмин А.Н. Задача поиска ассоциативных правил в системах поддержки принятия решений на основе хранилищ данных // Информационная культура в системе подготовки будущего инженера. Материалы региональной научно-практической конференции, Казань, Изд-во Казан. гос. техн. ун-та, 2006. - С.111-112.

8. Кузьмин А.Н. Трёхуровневая архитектура хранилища данных с интерфейсом запросов // Электронное периодическое издание: СЭТС - Социально-экономические и технические системы. Секция: математика, механика и выч. техника, Набережные Челны, Камская гос. инж.-экон. акад-я, № 2 (18), 2006. - 6С.

9. Кузьмин А.Н., Ризаев И.С. Применение методов классификации в системах поддержки принятия решений на основе хранилищ данных Математические методы в технике и технологиях. Сборник трудов, Том 2, Воронеж, Воронежская гос. технол. акад-я, 2006 - С.146-148.

10. Кузьмин А.Н., Ризаев И.С. Интерфейс управления запросами в среде хранилищ данных // Научно-техническая конференция по вопросам информатики, вычислительной техники и информационной безопасности. Материалы конференции, Казань, Изд-во Казан. гос. техн. ун-та, 2006. - С.61-64.

11. Кузьмин А.Н., Ризаев И.С., Яхина З.Т. О повышении производительности хранилищ данных. Тезисы докладов 4-й ежегодной международной научно-практической конференции, Центр инновационных технологий, 2006, - С.106-110

12. Кузьмин А.Н. Оценка качества автоматизированной системы, основанной на технологии хранилищ данных // Вестник Казанского технологического университета, Казань, Казан. гос. технол. ун-т, Отечество, №2, 2006. - С.315-324.

13. Ю. Стоцкий. «Самоучитель Office XP.» издательский дом «Питер» 2006 г.

14. М.П. Малыхина «Базы данных: основы, проектирование, использование» «БХВ-Петербург» 2004 г.

15. Волоха А.В Microsoft SQL Server 2005. Новые возможности. – Спб: Питер, 2006 г.

16. Дейт К.ДЖ. Введение в системы баз данных. -6‑е изд.: Пер. с англ. – М.: Издательский дом «Вильямс», 2002, 848 с.

17. Шарон Б., Мэйбл Г., SQL Server 2000. Энциклопедия программиста. – ДиаСофт, 2015 г.

18. Справочная система Microsoft Access 2012. 8. Microsoft Access 2012 (Приложение Office XP). Руководство пользователя.

19. Эффективная работа с СУБД А. Рубен, А. Горев, С. Макшарипов СПб.: Питер, 2014. – 822 с.

20. Microsoft Excel 2000: справочник. Под ред. Ю. Колесникова. – СПб.: Питер, 2016. – 480 с.

21.Андреева В.И. Делопроизводство / В.И. Андреева. - М.: Бизнес-школа, 2011. - 192 с.

22.Булюлина Е.В. Архивоведение / Е.В. Булюлина. - Волгоград: «Издательство ВолГУ», 2015. - 96 с.

22. Вигер А.М Секретарское дело / А.М. Вигер, О.П. Дорофьва, Е.К. Губская. - М.: Феникс, 2014 - 320 с.

23. Горфейн Г.М. Архивоведение / Г.М. Горфейн, Л.Е. Шепелев. - Ленинград: Издательство ленинградского университета, 2017. - 86 с.

24. Кирсанова М.В. Современное делопроизводство / М.В. Кирсанова. - М.: ИНФРА-М, 2013. - 304 с.

25. Крайская З.В. Архивоведение / З.В. Крайская, Э.В. Челлини. - М.: НОРМА, 2016. - 224 с.

26. Кузнецова Т.В. Делопроизводство / Т.В. Кузнецова, Л.В. Санкина, Т.А. Быкова. - М.: ЮНИТИ-ДАНА, 2013. - 359 с.

27. Кузнецова Т.В. Делопроизводство и техническая документация / Т.В. Кузнецова, Е.А. Степанов, Н.Г. Филлипов. М.: Высшая школа, 2004. - 159 с.

28. Непогода А.В. Делопроизводство организации / А.В. Непогода, П.А. Семченко. - М.: Омега-Л, 2009. - 480 с.

29. Охотников А.В. Документоведение и делопроизводство / А.В. Охотников, Е.А. Булавина. - М.: ИКЦ «МарТ», 2013. - 304 с.

30. Сергазин Ж.Ф. Основы обеспечения сохранности документов / Ж.Ф. Сергазин. - М.: Высшая школа, 2006. - 239 с.