Исследование методов автоматического анализа текстов и разработка интегрированной системы семантико-синтаксического анализа

• Автор: Шелманов, Артем Олегович
• Шифр специальности: 05.13.17
• Научная степень: Кандидатская
• Год защиты: 2015
• Место защиты: Москва
• Количество страниц: 210 с. : ил.

СОДЕРЖАНИЕ
ВВЕДЕНИЕ
ГЛАВА 1. СИНТАКСИЧЕСКИЙ, СЕМАНТИЧЕСКИЙ И СЕМАНТИКОСИНТАКСИЧЕСКИЙ АНАЛИЗ ТЕКСТОВ НА ЕСТЕСТВЕННОМ ЯЗЫКЕ

1.1. Синтаксический анализ

1.1.1. Задачи синтаксического анализа текстов на естественном языке. Модели синтаксической структуры предложения

1.1.2. Методы построения синтаксических деревьев составляющих

1.1.3. Методы построения синтаксических деревьев зависимостей

1.1.4. Системы синтаксического анализа текстов на русском языке

1.2. Семантический анализ

1.2.1. Модели семаштики текста

1.2.2. Методы определения ролевых структур высказываний

1.3. Семантико-синтаксический анализ
1.3.1. Подходы, интегрирующие синтаксический и семантический анализ .
1.3.2. Подходы, интегрирующие построение синтаксических деревьев зависимостей с определением ролевых структур высказываний
1.4. Выводы
1.5. Цель и задачи исследования
ГЛАВА 2. ИНТЕГРАЦИЯ МЕТОДОВ СИНТАКСИЧЕСКОГО И СЕМАНТИЧЕСКГО АНАЛИЗА ТЕКСТОВ
2.1. Задача определения ролевых структур высказываний в текстах на
русском языке
2.2. Метод определения ролевых структур высказываний в текстах на
русском языке
2.2.1. Общий алгоритм работы семантического анализатора
2.2.2. Поиск предикатных слов
2.2.3. Поиск семантических аргументов
2.2.4. Назначение ролей семантическим аргументам

2.2.5. Разрешение неоднозначности назначения семантических ролей аргументам
2.3. Метод семантико-синтаксического анализа текстов
2.3.1. Общее описание метода семантико-синтаксического анализа
2.3.2. Поиск возможных семантических аргументов
2.3.3. Определение дополнительных семантических аргументов
2.3.4. Корректировка синтаксического дерева зависимостей
2.4. Выводы
ГЛЛВЛ 3. ЭКСПЕРИМЕНТАЛЬНОЕ ИССЛЕДОВАНИЕ МЕТОДОВ СЕМАНТИЧЕСКОГО И СЕМАНТИКО-СИНТАКСИЧЕСКОГО АНАЛИЗА.
3.1. Тестовые данные и оценки качества
3.2. Оценка качества синтаксического анализа, определения категориальносемантических классов, морфологического анализа
3.3. Экспериментальное исследование метода поиска семантических аргументов
3.4. Экспериментальное исследования метода семантического анализа
3.5. Экспериментальное исследование метода семантико-синтаксического анализа
3.5.1. Оценка влияния метода семантико-синтаксического анализа на качество синтаксического анализа
3.5.2. Оценка влияния метода семантико-синтаксического анализа на качество решения задачи определения ролевых структур высказываний
3.6. Выводы
ГЛАВА 4. ПРИМЕНЕНИЕ МЕТОДОВ СЕМАНТИЧЕСКОГО И СЕМАНТИКО-СИНТАКСИЧЕСКОГО АНАЛИЗА К ЗАДАЧАМ ОБРАБОТКИ ТЕКСТОВ НА ЕСТЕСТВЕННОМ ЯЗЫКЕ
4.1. Применение семантического и семантико-синтаксического анализа для построения семантической сети реляционно-ситуационной модели
4.2. Применение семантического и семантико-синтаксического анализа для вопросно-ответного поиска
4.2.1. Метод ранжирования сниппетов для вопросно-ответного поиска в метапоисковой системе

4.2.2. Экспериментальное исследование метода ранжирования сниппетов для вопросно-ответного поиска в метапоисковой системе
4.3. Применение семантического и семантико-синтаксического анализа для решения задачи автоматического извлечения определений и авторских терминов из текстов научных публикаций
4.3.1. Метод извлечения определений и авторских терминов из текстов научных публикаций
4.3.2. Экспериментальное исследование метода извлечения определений и авторских терминов из текстов научных публикаций
4.4. Выводы
ЗАКЛЮЧЕНИЕ
СПИСОК СОКРАЩЕНИЙ И УСЛОВНЫХ ОБОЗНАЧЕНИЙ
СПИСОК ИСПОЛЬЗОВАННОЙ ЛИТЕРАТУРЫ
ПРИЛОЖЕНИЯ
Приложение 1. Особенности реализации программного обеспечения для семантического и семантико-синтаксического анализа. Программная архитектура лингвистического процессора
Приложение 2. Исследование эффективности синтаксического анализатора на основе MaltParser
Приложение 3. Описание семантического словаря
Приложение 4. Примеры, в которых разработанная интегрированная система семантико-синтаксического анализа откорректировала синтаксическую и семантическую структуру предложения

Формальная семантика
Одним из наиболее известных способов моделирования семантики выражений на естественном языке является их представление на языке логики. Ричард Монтегю первый показал, что английский язык можно транслировать в формальный язык [70]. Его предположение заключалось в том, что на теоретическом уровне формальные и естественные языки существенным образом не различаются, а значение любого предложения есть условие его истинности. При этом значение предложения складывается (выводится) из значений его частей. Монтегю разработал грамматику семантики, в основу которой легло исчисление предикатов первого порядка, расширенное интенсиональной логикой, которая включает в себя лямбда-исчисление, расширенную структуру типов и типы функций.
Формальная семантика - это один из подходов к семантике синтаксиса. В работе [71] была выдвинута гипотеза о том, что каждое синтаксическое правило имеет свой аналог в семантике, и формальную грамматику для синтаксиса и семантики можно совместить. На рисунке 4 представлен пример дерева, которое построено на основе применения формальной интегрированной синтаксической и семантической грамматики, в соответствии с которым осуществляется вывод формулы высказывания «Every restaurant closed».