Информационно-поисковые системы: архитектура, методы индексирования и оценка качества поиска в корпоративных и научных коллекциях
Цель
Задачи
- 1. Проанализировать архитектуру и ключевые компоненты информационно-поисковых систем.
- 2. Исследовать и сравнить методы индексирования и структуры индексов.
- 3. Оценить модели ранжирования и разработать набор метрик для измерения качества поиска.
- 4. Построить прототип поисковой системы и провести экспериментальное сравнение конфигураций.
Продукт
Актуальность
Предпросмотр документа
Руководитель: ФИО
Обосновать актуальность исследования, сформулировать цель и задачи курсовой работы.
Дать обзор развития поисковых систем, классифицировать по назначению и архитектуре.
Описать основные компоненты движка: парсер, индексатор, хранилище, модуль ранжирования.
Рассмотреть модели представления текста: мешок слов, векторные и нейросетевые эмбеддинги.
Рассмотреть инвертированные индексы, компрессию и распределенные индексации.
Описать токенизацию, нормализацию, стемминг, лемматизацию и методы расширения запросов.
Исследовать подходы к масштабированию индексации и выполнению запросов в распределенной среде.
Рассмотреть BM25, языковые модели и нейросетевые подходы к ранжированию.
Определить метрики качества, процедуру аннотирования и план экспериментов.
Представить результаты экспериментальных замеров и интерпретировать их практическую значимость.
Систематизировать результаты, дать рекомендации и указать направления для дальнейших исследований.