2.3 Другие особенности

Кроме PageRank и использование текста привязки, Google имеет несколько других особенностей. Во-первых, у него есть информация о местоположении для всех хитов и поэтому имеет широкое использование в поисках близости. Во-вторых, Google отслеживает некоторые визуальные детали презентации, такие как размер шрифта слова. Слова в большей или смелее шрифта взвешиваются выше, чем другие слова. В-третьих, полная сырого HTML страниц доступен в репозитории.

3 Связанные работы

Поиск исследований в Интернете имеет короткий и краткая история. World Wide Web Worm (WWWW) [McBryan 94] был одним из первых поисковых систем Интернета.Впоследствии он был последовал ряд других академических поисковых систем, многие из которых в настоящее время публичных компаний. По сравнению с ростом Интернета и важность поисковых системах есть очень мало документов о последних поисковых [ Пинкертон 94 ]. По словам Майкла Молдина (главный научный сотрудник, Lycos Inc) [Молдина]", различные услуги (в том числе Lycos) тесно охранять детали этих баз данных". Тем не менее, было достаточно много работы от индивидуальных особенностей поисковых системах. Особенно широко представлены работы, которые могут получить результаты пост-обработки результатов существующих коммерческих поисковых систем, или производят небольших масштабах "индивидуальный" поисковые системы. Наконец, было много исследований по информационно-поисковых систем, особенно на хорошо контролируется коллекций. В следующих двух разделах мы обсудим некоторые районы, где это исследование должно быть расширено, чтобы работать лучше в Интернете.

3.1 Информационно-поисковая

Работа в информационно-поисковых систем насчитывает много лет и хорошо разработана [ Виттен 94 ]. Тем не менее, большинство исследований на информационно-поисковых систем на небольших хорошо контролируемых однородных коллекций, таких как сборники научных трудов или новости по этой теме. Действительно, основной ориентир для поиска информации, конференции и извлечения текста [ TREC 96 ], использует довольно небольшой, хорошо управляется коллекцию для своих тестов. "Очень большой корпус" тест только по сравнению с 20GB 147GB нашего обхода 24000000 веб-страниц. Вещи, которые хорошо работают на TREC часто не приводит к хорошим результатам в Интернете. Например, стандартная модель векторного пространства пытается вернуть документ, который наиболее близко соответствует запросу, при условии, что оба запроса и документа являются векторами определяется их вхождению слова. В Интернете, эта стратегия часто возвращается очень короткий документов, запросов, а также несколько слов. Например, мы видели, основной поисковой вернуться страница, содержащая только "Билл Клинтон отстой" и картинка из "Билл Клинтон" запроса. Некоторые утверждают, что в Интернете, пользователи должны определить более точно, что они хотят, и добавить несколько слов на их запрос. Мы существенно расходятся во мнениях с этой позицией. Если пользователь выполняет запрос, как "Билл Клинтон" они должны получить разумные результаты, так как есть огромное количество качественной информации доступно на эту тему. Приведенные примеры, как эти, мы считаем, что стандартная работа поиска информации должна быть расширена, чтобы эффективно бороться с Интернет.