Методы и средства мониторинга сервисов передачи данных в глобальных распределенных инфраструктурах

• Автор: Ужинский, Александр Владимирович
• Шифр специальности: 05.13.01
• Научная степень: Кандидатская
• Год защиты: 2010
• Место защиты: Дубна
• Количество страниц: 118 с. : ил.

Оглавление
Введение
Глава I Исследование структуры и принципов функционирования сервисов передачи файлов в глобальных распределенных инфраструктурах.

1.1 Исследование архитектуры сервисов передачи файлов

1.1.1 Общие сведения о сервисе передачи файлов РГ8.

1.1.2 РТЭкапалы.

1.1.3 Схемы взаимодействия П8 с элементами сервиса управления данными

1.2 Исследование методов и средств мониторинга информационных систем.

1.2.1 Вычислительные машины и мониторинг их состояния

1.2.2. Становление информационных систем и новые задачи мониторинга

1.2.3. Мониторинг баз данных и новые формы представления результатов.

1.2.4. Мониторинг распределенных систем
1.2.5. Мониторинг компьютерных сетей.
1.2.6. Мониторинг с человеческим лицом.
1.2.7. Новое тысячелетие и технологии мониторинга.
1.2.8. Мониторинг грид..
Глава 2 Методы и средства обработки и хранения информации о сбоях, возникающих при передаче данных в глобальных распределенных инфраструктурах
2.1 Хранение данных об ошибках.
2.2 Прототип системы мониторинга.
2.2.1 Извлечения данных в прототипе системы мониторинга
2.2.2 Хранение данных в прототипе системы мониторинга
2.2.3 Представление данных в прототипе системы мониторинга.
2.3 Исследование сбоев, возникающих на каналах передачи данных.
2.3.1 Исследование сбоев в РТБ версии 1.5
2.3.2 Исследование сбоев в ГТ8 версии 2.0
2.3.3 Основные результаты исследования сбоев на каналах передачи данных
Глава 3. Разработка и реализация подхода к проектированию систем мониторинга сервисов передачи файлов.
3.1 Классификация ошибок, возникающих в распределенных системах передачи данных.
3.2 Подход к проектированию систем мониторинга сервисов передачи файлов в крупных распределенных гридинфраструктурах
3.3 Система мониторинга сервиса передачи файлов.
3.4 Отчеты в системе мониторинга.
3.5 Панель администратора в системе мониторинга.
3.6 Механизм оповещений в системе мониторинга.
Глава 4 Автоматизация грид
4.1 Автономные грид.
4.1.1 Архитектура грид
4.1.2 Автономный компьютинг.
4.1.3 Автоматизация и адаптивность грид
4.1.4 Сервис управления грид.
4.3 Применение ЭС для автоматизации сервиса передачи файлов
Заключение.
Приложение А Различные интерфейсы системы мониторинга ГТ8 .
Литература


Основой для построения любой грид-инфраструктуры является промежуточное npoipaMMHOC обеспечение (Г1ПО) - middleware. Middleware, используемое в WLCG, разрабатывается в рамках проекта EGEE (4) и называется gLite (8). Основной задачей EGEE является объединение мировых компьютерных ресурсов в единую однородную среду, которой ученые могли бы пользоваться совместно в мировом масштабе. Сейчас в EGEE входят порядка 0 сайтов из более чем стран, и 0 виртуальных организаций используют его процессоров для решения различного рода задач. Middleware Globus (9), разрабатываемое Globus Alienee (), наравне с glite является весьма популярным и используется в множестве коммерческих п научных проектов. Сервис передачи файлов в gLite называется FTS (File Transfer Service) (), его аналог в Globus - RFT (Reliable File Transfer Service) (). К концу -го года набор средств мониторинга FI’S и RFT был весьма скромен и состоял в основном из небольших скриптов, визуализирующих информацию, предоставляемую самими сервисами посредством интерфейса командной строки, или комплексов мониторинга широкого профиля, отражающими общую информацию по передачам данных. Ни одна из систем не предоставляла полную информацию о состоянии сервисов, истории их функционирования, а главное, с учетом количества потенциальных источников сбоев, об ошибках, возникающих в распределенных системах передачи данных. Актуальной задачей является и решение проблемы адаптивности грид. Из-за сложности и разнородности грид-инфраструктур существует множество трудностей в их поддержании и управлении. Для их установки, конфигурирования и контроля требуется множество опытных специалистов, которых зачастую очень сложно найти, а тем более обучить. Современные грид-инфраструктуры не способны автоматически подстраиваться под изменения программно-аппаратной среды (отсутствует адаптивность), вследствие чего реакция па сбои и изменения в инфраструктуре происходит с большим запозданием. Автоматизация работы как отдельных, так и групп сервисов способно самым положительным образом сказаться на адаптивности, а значит и на эффективности работы грид-инфраструктур. Разработка системы мониторинга сервиса передачи данных и исследование полученной информации о сбоях. Исследование возможностей адаптивности и автоматизации сервисов передачи файлов. Предложена классификация ошибок, возникающих в распределенных системах передачи данных, основанная на четкой иерархии описания сбоев и использовании механизма паттернов. Предложен и реализован подход к проектированию систем мониторинга сервисов передачи файлов в крупных распределенных грид-инфраструктурах. Предложен новый сервис - сервис управления фид (Grid Management Service, GMS), способный решить проблему адаптивности глобальных распределенных систем. Создана система мониторинга сервиса передачи файлов, предоставляющие широкие возможности для анализа и обработки информации о его функционировании. Проведено исследование ошибок, возникающих при передаче файлов в крупных распределенных грид-инфраструктурах. Исследование позволило определить самые распространенные ошибки, причины их возникновения, основные области возникновения ошибок, выявить программные и логические ошибки в приложениях. С целью автоматизации работы сервиса передачи файлов и апробации идей СМ8 создан прототип модуля экспертной системы, способный значительно облегчить работу администраторов систем передачи данных. Архитектурные особенности сервиса передачи файлов таковы, что для решения задач мониторинга сервиса требуется использовать модифицированные методы мониторинга из различных областей. Предложенная классификация ошибок, предоставляет стандартизированное решение вопросов разделения, объединения и детализации сбоев, возникающих в распределенных системах передачи данных. Разработанный подход к проектированию систем мониторинга сервисов передачи данных в глобальных распределенных инфраструктурах стандартизирует разработку приложений в данной области. Разработанная система мониторинга предоставляет широкие возможности для анализа и обработки информации о функционировании сервиса передачи файлов.