Математическое и программное обеспечение баз данных для долговременного хранения сверхбольших объектов сложной структуры

• Автор: Стефанский, Михаил Алексеевич
• Шифр специальности: 05.13.11
• Научная степень: Кандидатская
• Год защиты: 2005
• Место защиты: Москва
• Количество страниц: 150 с. : ил.

ВВЕДЕНИЕ
ГЛАВА 1. СРАВНИТЕЛЬНЫЙ АНАЛИЗ СИСТЕМ УПРАВЛЕНИЯ ХРАНЕНИЕМ 9 СВЕРХБОЛЬШИХ ОБЪЕКТОВ ДАННЫХ.

1.1. ОПРЕДЕЛЕНИЕ СВЕРХБОЛЬШИХ ОБЪЕКТОВ СЛОЖНОЙ СТРУКТУРЫ

1.2. ОБЗОР ПРОГРАММНЫХ ПРОДУКТОВ, ИСПОЛЬЗУЕМЫХ ДЛЯ ХРАНЕНИЯ ДАННЫХ

1.3. ОБЗОР СИСТЕМ ХРАНЕНИЯ СПУТНИКОВЫХ ДАННЫХ

1.4. ОСНОВНЫЕ ОГРАНИЧЕНИЯ И НЕДОСТАТКИ СУЩЕСТВУЮЩИХ ПРОГРАММНЫХ РЕШЕНИЙ ДЛЯ ХРАНЕНИЯ СВЕРХБОЛЬШИХ ОБЪЕКТОВ СЛОЖНОЙ СТРУКТУРЫ
ГЛАВА 2. РАЗРАБОТКА МЕТОДИКИ ПОСТРОЕНИЯ АКТИВНЫХ БАЗ ДАННЫХ, ОБЕСПЕЧИВАЮЩИХ ДОЛГОВРЕМЕННОЕ ХРАНЕНИЕ ОБЪЕКТОВ СЛОЖНОЙ СТРУКТУРЫ

2.1. ПОСТАНОВКА ЗАДАЧИ ПОСТРОЕНИЯ АКТИВНЫХ БАЗ ДАННЫХ

2.2. РАЗРАБОТКА МЕТОДИКИ ПОСТРОЕНИЯ АКТИВНОЙ СРЕДЫ БАЗ ДАННЫХ

2.3. РАЗРАБОТКА МЕТОДИКИ ПОСТРОЕНИЯ СИСТЕМЫ ИНФОРМАЦИОННЫХ РЕСУРСОВ ДОЛГОВРЕМЕННОГО ХРАПЕНИЯ СВЕРХБОЛЬШИХ ОБЪЕКТОВ СЛОЖНОЙ СТРУКТУРЫ
2.4. ОЦЕНКА ТРЕБОВАНИЙ К РЕСУРСАМ, НЕОБХОДИМЫМ ДЛЯ ФУНКЦИОНИРОВАНИЯ СИСТЕМЫ ХРАНЕНИЯ, НА ОСНОВЕ АКТИВНЫХ БАЗ ДАННЫХ
ГЛАВА 3. РАЗРАБОТКА СИСТЕМЫ ДОЛГОВРЕМЕННОГО ХРАНЕНИЯ
СВЕРХБОЛЬШИХ ОБЪЕКТОВ СЛОЖНОЙ СТРУКТУРЫ, НА ОСНОВЕ АКТИВНОЙ БАЗЫ ДАННЫХ
3.1. НАЗНАЧЕНИЕ ЦЕНТРА ПЛАНИРОВАНИЯ, ХРАНЕНИЯ, ОБРАБОТКИ И РАСПРОСТРАНЕНИЯ ИНФОРМАЦИИ
3.2. РАЗРАБОТКА СТРУКТУР ПРОГРАММНОГО ОБЕСПЕЧЕНИЯ СИСТЕМЫ ХРАНЕНИЯ
3.3. РЕАЛИЗАЦИЯ ПРОГРАММНЫХ КОМПОНЕНТ СИСТЕМЫ ХРАНЕНИЯ
ГЛАВА 4. РАЗРАБОТКА СИСТЕМЫ ДОСТУПА К ДАННЫМ, ОРИЕНТИРОВАННОЙ 6 НА УДАЛЕННЫХ ПОЛЬЗОВАТЕЛЕЙ
4.1. ЗАДАЧА КОНСОЛИДАЦИИ ДАННЫХ, ПРИ ОБЕСПЕЧЕНИИ ДОСТУПА К 6 ПРОСТРАИСТАЕННОРАСПРЕДЕЛЕННОЙ ИНФОРМАЦИИ
4.2. АРХИТЕКТУРА ПОСТРОЕНИЯ КАТАЛОГА ДАННЫХ С ВОЗМОЖНОСТЬЮ 0 ДОСТУПА УДАЛЕННЫХ ПОЛЬЗОВАТЕЛЕЙ
4.3. РАЗРАБОТКА ПРОГРАММНОГО ОБЕСПЕЧЕНИЯ АКТУАЛИЗАЦИИ 6 ИНФОРМАЦИИ МЕЖДУ ДОЛГОВРЕМЕННЫМ АРХИВОМ ДАННЫХ И VКАТАЛОГАМ
4.4. ПРИНЦИПЫ СОЗДАНИЯ ОБЩЕГО РЕПОЗИТАРИЯ ДАННЫХ НА ОСНОВЕ 0 РАСПРЕДЕЛЕННЫХ АРХИВОВ
ЗАКЛЮЧЕНИЕ
СПИСОК ИСПОЛЬЗОВАННЫХ ИСТОЧНИКОВ


Рассмотрим характерные особенности спутниковых данных ДЗЗ, влияющие на организацию их хранения и обеспечение к ним доступа. Существенной особенностью практически любых данных ДЗЗ является их большой объем. Так, например, объем сеанса современных спутников дистанционного зондирования, который передается по радиоканалам, содержит в себе цифровые космические снимки специализированного формата и может составлять порядка 1 Гбайта, причем файл содержит информацию, представленную как в текстовом, так и графическом виде[]. Для того чтобы не потерять достоверность спутниковых данных, при проведении сжатия информации можно использовать лишь алгоритмы, не приводящие к потере качества. Коэффициент сжатия таких алгоритмов для изображений колеблется обычно между 1,5 и 1,8. Некоторые алгоритмы сжатия приведены в работах [3,]. При таком коэффициенте объемы даже сжатых данных все равно остаются достаточно большими для организации хранения и массовой передачи по сетям Интернет. Коротко остановимся на форматах спутниковых данных ДЭЗ. Данные, передаваемые с природноресурсных и метеорологических спутников, достаточно разнородны, поэтому и формат представления данных уникален практически для каждой спутниковой системы. И хотя на сегодняшний день разработаны достаточно универсальные форматы хранения спутниковых данных, на практике они применяются редко. Этот факт, скорее всего, связан с тем, что любой универсальный формат обычно достаточно громоздок и тяжел в работе. Поэтому во многих случаях гораздо выгоднее использовать формат, позволяющий эффективно решать какой-то определенный класс задач. Вопросы, связанные с использованием специализированных форматов для представления спутниковых данных освещены в работах [, ,]. Тематически обработанные спутниковые данные конвертируются в любые картографические форматы удобные пользователям, например в формат геоинформационных систем (ГИС)[5]. Данные тематической и специализированной обработки в основном используются для решения конкретных практических задач. С развитием и широким внедрением цифровых технологий, задача долгосрочного хранения больших объемов видеоинформации становится одной из самых важных задач при системных решениях в комплексах автоматизации, например для телевизионных компаний. Кроме того, предоставляемые современными средствами коммуникации возможности быстрого распространения медиаинформации в различные уголки мира требуют не только организации хранения видео- и аудиоматериалов, но и предоставления возможности оперативно распоряжаться накопленным материалом[]. Новые задачи заставляют по-новому взглянуть и на сам видео- или аудиоматериал. Так, за последнее время в области телевещания достаточно прочно утвердился термин медиа-ассет (Media Assct)['J, который определяет каждый отдельный медиаобъект как единое целое. Медиа-ассет представляет собой совокупность медиаконтента (последовательность видео- или аудиоматериала) и метаданных. При этом решение задачи долгосрочного хранения медиаинформации тесно связано и с задачами управления медиа-ассетом. Такое производство подразумевает создание и активное использование »метаданных. Для управления аудио-, видео- и метаданными необходимы специальные решения. Работа с метаданными сейчас -* преимущественно функция архива. Однако постепенно она становится все в большей степени необходимой и при создании программ. Архивы перемещаются в центр производства. В результате мы приходим к тому, что такая «гибридная» составляющая объекта усложняет задачу хранения и доступа к данным, т. ОБЗОР ПРОГРАММНЫХ ПРОДУКТОВ. ИСПОЛЬЗУЕМЫХ ДЛЯ ХРАНЕНИЯ ДАННЫХ. В параграфе рассматривается ряд наиболее распространенных коммерческих программных продуктов (ПП), предназначенных для организации систем хранения данных (СХД). В обзор вошли ПП двух типов: во-первых - так называемые, универсальные системы управления хранением данных, применяемые для решения широкого спектра задач, во-вторых, системы ориентированные на решение, непосредственно, задач хранения объектов сложной структуры [, ]. В качестве первого примера рассматривается система Tivoli Storage Manager (TSM) (рис 1. IBM (США) [].