Формализация процесса мониторинга информации в сети Интернет при создании предметно-ориентированных хранилищ данных

• Автор: Леонов, Евгений Алексеевич
• Шифр специальности: 05.13.01
• Научная степень: Кандидатская
• Год защиты: 2011
• Место защиты: Брянск
• Количество страниц: 198 с. : ил.

ОГЛАВЛЕНИЕ
Введение
Глава 1. Современные математические модели, применяемые для построения предметно-ориентированных хранилищ данных
1.1. Обзор основных методов наполнения предметно-ориентированных хранилищ данных
1.2. Анализ принципов взаимодействия с внешними информационнопоисковыми системами
1.3. Обзор структур данных, используемых в информационных системах
1.4. Анализ современных методов анализа информации
1.5. Описание принципов работы систем формирования предметноориентированных хранилищ данных
1.6. Выводы по главе. Цель и задачи диссертационной работы
Глава 2. Формализация универсального взаимодействия подсистем метапоиска с ИПС в рамках мультиагентной стратегии
2.1. Обобщенная структура взаимодействия подсистемы метапоиска с внешними ИПС
2.2. Математическая модель описания внутреннего агента метапоиска
2.3. Математическая модель описания внешних информационно-поисковых систем
2.4. Математическая модель функции настройки агента метапоиска на работу с внешней информационно-поисковой системой по ее полному описанию
2.5. Математическая модель поиска документов через внешние ИПС с использованием экземпляра агента метапоиска
2.6. Описание принципов работы агента метапоиска, его возможностей применения и усовершенствования
2.7. Выводы по главе

Глава 3. Разработка и оптимизация методов анализа и обработки информации при создании предметно-ориентированных хранилищ данных
3.1. Моделирование процесса выявления значимой смысловой части документа и приведение его к универсальной иерархической структуре
3.2. Разработка методов анализа медиаинформации и семантической классификации изображений
3.3. Обоснование выбора и методы выявления основных критериев качества и пертинентности документов
3.4. Ранжирование и фильтрация заведомо непертинентных документов в хранилище данных
3.5. Выводы по главе
Глава 4. Разработка программного комплекса для формирования предметно-ориентированного хранилища данных
4.1. Разработка архитектуры программного комплекса
4.2. Разработка структуры предметно-ориентированного хранилища данных и его представление в базе данных
4.3. Разработка подсистемы анализа коллекций изображений и тестирования каскада нейронных сетей
4.4. Разработка принципов клиент-серверного взаимодействия
4.5. Разработка программных модулей пользовательского интерфейса
4.6. Выводы по главе
Глава 5. Анализ эффективности разработанных моделей, и исследование возможностей их применения при построении современных информационных систем
5.1. Оценка эффективности разработанных методов и алгоритмов
5.2. Анализ применения разработанных моделей и методов в современных информационных системах
5.3. Результаты использования разработанных методов в рамках НИР и конкурсных работ
5.4. Анализ возможных сфер применения разработанных методов
5.5. Выводы по главе
Заключение
Список использованных источников

ранжирования. В коммерческих реализациях алгоритма PageRank применяются изменения, которые должны уменьшить влияние самой поисковой системы, но как показывает практика, для объективной оценки качества документа, одного параметра цитируемости не хватает. Коммерческими ИПС предпринимались попытки введения оценок пользователей, как отдельной подсистемы ранжирования, однако такие усовершенствования очень не устойчивы к методам 8ЕО.
Аспекты применения оценки цитируемости в ограниченных коллекциях
Отдельно следует обратить внимание на оценку качества документов в ограниченных коллекциях. Основной проблемой применения хорошо зарекомендовавшего себя алгоритма Ра§еКапк становится именно ограниченность коллекции, так как в данном случае при анализе документов в коллекции не имеется информация о полной цитируемости документов. Во многих работах, посвященных данному вопросу, предлагаются модификации алгоритма Pag-еЛапк, в которых производятся попытки решить проблему с большим количеством висячих узлов графа документов [153], то есть документов ссылающихся на документы, не располагающиеся в коллекции и не имеющие ссылок на себя из документов в коллекции. На практике, такие модификации могут быть применены только в тех коллекциях, которые составлялись с использованием поисковых роботов, переходящих по ссылкам между документами. Однако для построения предметно-ориентированных систем чаще применяются механизмы метапоиска или совмещенные методы. Что приводит к построению коллекций, в которых документы практически не связаны ссылками между собой. Следовательно, алгоритмы ранжирования, опирающиеся на цитируемость документов при построении предметно-ориентированных хранилищ данных, практически не применимы.
Для построения предметно-ориентированных информационных систем необходимо вводить критерии, совпадающие с критериями, используемые экспертами при оценке качества документов. Многие эксперты не читая документ полностью, могут произвести предварительную оценку его качества. Критерии, на которые они при этом опираются, могут быть формализованы и использованы в ИС для предварительной оценки заведомо нерелевантных документов.