55. Методы поиска информации в Интернет

Основные методы поиска информации в Интернете, которые, в зависимости от целей и задач ищущего, используются по отдельности или в комбинации друг с другом:

• Непосредственный поиск с использованием гипертекстовых ссылок.

• Использование поисковых машин.

• Поиск с применением специальных средств.

• Анализ новых ресурсов.

Непосредственный поиск с использованием гипертекстовых ссылок

Поскольку все сайты в пространстве WWW фактически оказываются связанными между собой, поиск информации может быть произведен путем последовательного просмотра связанных страниц с помощью броузера. Ручной просмотр Web-страниц часто оказывается единственно возможным на заключительных этапах информационного поиска, когда механическое "копание" уступает место более глубокому анализу. Использование каталогов, классифицированных и тематических списков и всевозможных небольших справочников также относится к этому виду поиска.

Анализ новых ресурсов

Поиск по новообразованным ресурсам может оказаться необходимым при проведении повторных циклов поиска, поиска наиболее свежей информации или для анализа тенденций развития объекта исследования в динамике. Другой возможной причиной может явиться то, что большинство поисковых машин обновляет свои индексы со значительной задержкой, вызванной гигантскими объемами обрабатываемых данных, и эта задержка обычно тем больше, чем менее популярна интересующая вас тема. Это соображение может оказаться весьма существенным при проведении поиска в узкоспециальной предметной области.

Поиск с применением специальных средств

Этот полностью автоматизированный метод может оказаться весьма эффективным для проведения первичного поиска.

Одна из технологий этого метода основана на применении специализированных программ-спайдеров, которые в автоматическом режиме просматривают Web-страницы, отыскивая на них искомую информацию. Фактически это автоматизированный вариант просмотра с помощью гипертекстовых ссылок, описанный выше (поисковые машины для построения своих индексных таблиц используют похожие методы). Результаты автоматического поиска обязательно требуют последующей обработки.

Выбор между использованием спайдера или поисковых серверов являет собой вариант классического выбора между применением универсальных или специализированных средств.

Т.о., автономные поисковые программы-роботы, то есть специализированные программы, устанавливаемые на компьютер пользователя и облегчающие ему поиск и иногда получение информации из сети, относятся ко второму типу поисковиков.

Поиск информации с помощью таких программ имеет одно неоспоримое преимущество: имеется возможность выбора ПС и настроек параметров поиска в полном соответствии с запросами пользователя.

Использование поисковых машин

Сегодня этот метод является одним из основных и фактически единственным при проведении предварительного поиска. Результатом последнего может являться список ресурсов Сети, подлежащих детальному рассмотрению. Как правило, применение поисковых машин основано на использовании ключевых слов, которые передаются поисковым серверам в качестве аргументов поиска: что искать. Если делать все правильно, то формирование списка ключевых слов требует предварительной работы по составлению тезауруса.

Метапоисковые системы

Метапоисковая система может быть реализована как в самой Сети, например, на Telnet- или Web-доступе, так и в виде локальной клиентской программы. Не обладая собственной индексной базой данных, метапоисковая система выступает в качестве шлюза, который передает через свой интерфейс запросы на автономные информационно поисковые системы и возвращает результаты поиска.

Одно из назначений метапоискового сервиса при поиске - тестирование Сети на предмет информации, соответствующей запросу. Метасистемы позволяют также оценить результативность применения отдельных информационно поисковых машин для решения конкретной поисковой задачи. К сожалению, для предметного и тонкого поиска метасистемы пока еще плохо применимы. Проблема заключается в том, что язык запросов мета-шлюза располагает лишь самыми общими для большинства ИПС, и поэтому крайне скромными возможностями. Появление проекта стандарта поисковых систем SESP в этом отношении открывает новые перспективы в развитии метасистем, поскольку стандартизация ИПС существенно расширит возможности шлюзования.

Информация организуется на серверах различным образом. Комплекс программных средств, используемых для этой организации, называют поисковой машиной.

Есть два основных вида организации поисковых машин:

1. Организация в виде сетевого каталога. Программное обеспечение просматривает доступную ему часть сети и составляет собственную базу данных – каталог сетевой информации. Подобная организация похожа на организацию тематического аннотированного каталога в библиотеке. Пользователь при обращении к серверу быстро получает обстоятельный ответ на запрос, так как поиск происходит в базе данных сервера, а не сети. Обратной стороной медали является наличие несуществующих ссылок и дискретность обновления БД сервера, так как для этого при всей его мощности и быстроте работы требуется определенное время. Как правило, дискретность обновления информации на таких серверах – единицы суток. Классическим примером поисковой машины этого типа является сервер Yahoo!.

2. Организация в виде сервера - формирователя сложного запроса на основе ключевых данных пользователя. Поисковая машина производит поиск информации в реальном времени по ресурсам Интернет, используя хитроумные алгоритмы и программы-роботы, запускаемые в сеть на время обработки запроса. В данном случае информация достаточно актуальна, но время получения ответа больше, чем в первом случае и сильно зависит от мощности поискового сервера и быстроты его собственного канала доступа в сеть. Пример машины такого типа – сервер Google.com.

Надо сказать, что существует и успешные реализации разумного объединения двух упомянутых подходов. Пример – российская поисковая система Yandex.