Современные поисковые системы

Заключение

Под поисковой системой - понимается программно-аппаратный комплекс, который предназначен для выполнения поиска информации в Глобальной сети Интернет, который способен реагировать и выполнять запросы пользователя, задаваемые в виде текстового поискового запроса, а так же выдачей списка ссылок на источники информации, в порядке релевантности (в соответствии запросу).
Среди основных характеристик поисковых систем необходимо выделить полноту, обеспечение точности, актуальности, скорости выполнения поиска, обеспечение наглядности.
Современные поисковые системы имеют различные структуры и алгоритмы реализации. Среди общих компонентов необходимо выделить модули индексирования, базы данных, поисковые сервера.


...

Введение 2
1. Понятие и функции поисковой системы 3
2. Основные характеристики поисковой системы 5
3. Состав и принципы работы поисковой системы 6
Заключение 9
Литература 10

Введение

Поиск информации - задача, которую человечество решает уже многие столетия. По мере роста объема информационных ресурсов, потенциально доступных одному человеку, были выработаны все более изощренные и совершенные поисковые средства и приемы, позволяющие найти необходимый документ.
Процесс поиска включает последовательность операций, направленных на сбор, обработку и предоставление необходимой информации заинтересованным лицам.
Поисковые системы уже давно стали неотъемлемой частью российского Интернета. Поисковые системы сейчас – это огромные и сложные механизмы, представляющие собой не только инструмент поиска информации, но и заманчивые сферы для бизнеса.
Большинство пользователей поисковых систем никогда не задумываются о принципах функционирования поисковых систем, о схеме о бработки запросов пользователей, о том, из чего эти системы состоят и как функционируют. Все эти вопросы будут рассмотрены в данной работе.

Пользователь обращается с запросом к поисковой машине, для того чтобы найти то, что ему нужно, максимально быстро и просто. При получении результата, пользователь оценивает функционирование поисковой системы, при этом он руководствуется в основном несколькими характеристиками. В основном это следующие показатели:- найдена ли информация необходимая пользователю?- количество раз перефразирования поискового запроса, для поиска нужной информации; - актуальность найденной информации;- скорость обработки запроса поисковой машины;- удобство предоставления результатов поиска;- порядок предоставления результатов поиска;- количество ненужной информации, которая была найдена наравне с полезной информацией;- «воспроизводимость» предоставления информации через некоторый срок. Обеспечение высоких показателей рассмотренных показателей заставляет разработчиков поисковых машин постоянно совершенствовать и разрабатывать новое совершенное алгоритмическое обеспечение поиска, а так же добавлять новые функции, для ускорения работы системы. 2. Основные характеристики поисковой системыРассмотрим наиболее важные характеристики поисковых систем [3].Под полнотой результатов поиска понимается параметр поисковой системы, которая характеризует отношение количества найденных по запросу документов к общему числу документов в сети Интернет, которое удовлетворяет поисковому запросу. Под точностью понимается степень соответствия результатов поиска запросу пользователя. Под актуальностью понимается характеристика, которая определяется временем, проходящим с момента публикации документов в сети Интернет, до занесения их в индексную базу поисковой системы [4]. Скорость поиска тесно связана с его устойчивостью к нагрузкам. Например, по данным ООО «Рамблер Интернет Холдинг», на сегодняшний день в рабочие часы к поисковой машине Рамблер приходит около 60 запросов в секунду. Такая загруженность требует сокращения времени обработки отдельного запроса. Здесь интересы пользователя и поисковой системы совпадают: посетитель желает получить результаты как можно быстрее, а поисковая машина должна отрабатывать запрос максимально оперативно, чтобы не тормозить вычисление следующих запросов.Наглядность представления результатов характеризуется, тем, что первые страницы выдачи должны содержать только нужную информацию. 3. Состав и принципы работы поисковой системы В Российской Федерации наиболее популярной системой поиска является «Яндекс», далее - Rambler.ru, Google.ru, Aport.ru, Mail.ru. Необходимо отметить, что на сегодняшний момент Mail.ru использует механизм и базу поиска «Яндекс» [5]. Каждая из названных поисковых систем имеет уникальную собственную структуру. Однако, поисковые системы имеют общие для всех поисковых систем компоненты. Основные различия в структуре поисковых систем выражаются в реализации механизмов взаимодействия компонентов.Модуль индексирования включает в себя три вспомогательных программы:Программа Spider, которая предназначена для скачивания WEB-страниц. Spider выполняет загрузку страницы и извлекает все внутренние ссылки с этой страницы, а так же скачивает html-код каждой страницы. Для скачивания страниц роботы используют протоколы HTTP. Программа Crawler автоматически проходит по всем ссылкам, найденным на странице. Выделяет все ссылки, присутствующие на странице. Программа Indexer - программа, которая проводит анализ веб-страницы, которая была скачена программой Spider. Программа Indexer проводит разбор страницы на структурные элементы и проводит их анализ, при этом применяются уникальные алгоритмы лексического и морфологического разбора.Под базой данных поисковой системы понимается система хранения данных, содержащая информационные массивы, в которых хранятся преобразованные параметры всех скачанных и обработанных модулем индексирования документов.Наиболее важным элементом системы является поисковый сервер, на котором реализованы алгоритмы, лежащие в основе функционирования всей системы, и обеспечивающие качество и скорость поиска.По информации ООО «Рамблер Интернет Холдинг» обработка поискового запроса в системе «Рамблер» происходит, так, как это изображено на рис.2.Рис.2 Обработка поискового запроса в поисковой системе1.1 – 1.3 fronted-сервера; 2.1-2.8-Proxy-сервера; 3.1-3.2-поиск по товарам; 4.1-4.2 – поиск по Top 100; 5.1.1-5.7.11 – Backend –сервера, содержащие основную индексную базу; 6.1-6.2- Backend –сервера, содержащие быструю базуПоисковый запрос поступает в маршрутизатор Cisco, а затем в посковую систему.