2. Характеристика серверів керування трафіком

Трафіком називається вся інформація, що передається через мережу Інтернет. Основна ціль серверів керування трафіком – перенаправлення споживачів до кінцевого сервера. Згідно з класифікацією веб-серверів до цієї групи належать пошукові системи, каталоги та ініціюючі сервери.

Пошукові системи. Завдання пошукових систем – впізнати інші сервери Інтернету через пошук за ключовими словами бази даних, яка складається з проіндексованого змісту веб-серверів мережі.

Пошукові системи складаються з трьох основних частин:

1. Спайдери (Spider, Crawler, Robot) — програма, що відвідує Веб-сервери, зчитує й індексує цілком або частково їхній вміст і далі рухається через посилання, знайдені на сервері. Спайдер повертається через визначені періоди часу, наприклад, кожного місяця, і повторює індексацію сторінок.

2. Усе, що знаходить і зчитує спайдер, попадає в індекси пошукової системи. Індекси системи – гігантське сховище інформації, де зберігаються копії текстової складової усіх сторінок, що відвідав і проіндексував спайдер.

3. Третя частина – це програма, що відповідно до запиту користувача перебирає індекси пошукової системи в пошуках інформації і видає йому в порядку зменшення релевантності знайдені документи. Релевантність визначає, наскільки повно той або інший документ відповідає критеріям, зазначеним у запиті користувача. Зрозуміло, далеко не завжди документ, визнаний пошуковою системою найбільш релевантним, буде таким на думку самого користувача.

У кожній пошуковій системі працює власний спайдер, кожна система індексує сторінки своїм особливим способом і пріоритети при пошуку за індексами теж відмінні. Тому запит на основі визначених ключових слів або виразів у кожній з пошукових систем зазвичай породжує різні результати.

Найбільш відомими міжнародними пошуковими системами є:

• AltaVista (http://www.altavista.digital.com/).

• Excite (http://www.excite.com/).

• HotBot (http://www.hotbot.com/).

• Infoseek (http://www.infoseek.com/).

• Lycos (http://www.lycos.com/).

• ВебCrawler (http://www.вебcrawler.com/).

Каталоги (directories). Сервери-каталоги виконують аналогічну пошуковим системам функцію з тією різницею, що пошук здійснюється користувачем вручну за ієрархічно організованою тематичною структурою каталогів. Для реєстрації в каталозі необхідно або заповнити визначену форму, або надіслати запит, що містить вказівку, в який розділ ви хочете помістити свою сторінку, короткий опис сайта і список ключових слів для пошуку сторінки в каталозі. «Королем» каталогів по праву вважається Yahoo! (http:// www.yahoo.com/).

Сайт (site) – ресурс Інтернету, який не має виділеної серверної програми. Як правило, він є інтегрованою частиною сервера, каталогом на серверному комп’ютері, незважаючи на те, що більшість сайтів мають власне доменне ім’я.

• Приклади українських каталогів:

• UaList.com – каталог, пошукова система, пошта, робота, знайомства;

• Youth.net.ua – каталог молодіжних сайтів;

• Richard-LS – тематичний каталог сайтів. Прямі лінки;

• Silver Україна в Інтернеті – тематичний каталог ресурсів. Пошук у рубриках;

• 360.com.ua – мета-пошук інформації на пошукових серверах усього світу; можливість пошуку інформації на музичних сайтах України та Росії;

• UaList – пошукова система і тематичний каталог українських сайтів;

• Sesna – пошукова система та каталог є однією з найсерйозніших розробок у сфері рубрикації української та україномовної частини Інтернету. Пошук виконується як за ключовими словами, так і за темами; в межах регіону або країни;

• Ukrop – український об'єднаний портал: інформація про Україну, останні новини, практично всі ресурси українського Інтернету, пошук необхідної інформації, каталог українських ресурсів;

• Старт Украина – інформаційно-розважальні та ділові ресурси. Фірми, організації, новини, оголошення, домени. Пошук у каталозі;

• AtlasUa – функціональний каталог українських сайтів. Має можливість пошуку товарів, послуг, новин, повнотекстових документів;

• QS – каталог сайтів та пошукова система. Посилання супроводжуються анотаціями. Також є прайс-листи, оголошення, курси валют, погода та ін.;

• КУСТ – пошук в українських ресурсах, різноманітні сервіси, послуги, служби. Статистика сайтів та чемпіонат сайтів.

  • Приклади російських каталогів:

• Улітка – тематичний каталог російських інтернет-ресурсів, який продовжує розвиватися. Поповнюється регулярно, але не надто оперативно. Пошук здійснюється як за назвою сайту, так і за URL. Посилання розбиті на декілька великих розділів, але не мають коментарів;

• SearchCentre – каталог ресурсів Інтернету, поділений на 15 категорій. Ведеться рейтинг сайтів;

• Омен – “Кращі посилання в Інтернеті” – великий тематичний каталог ресурсів Інтернету. Понад 10 тисяч кращих посилань з усіх тем, дво-трирівнева класифікація, відсутність неякісних ресурсів;

• Сурок – компактний каталог російських інтернет-ресурсів з можливістю пошуку;

• @llru.net – анотований каталог ресурсів. Посилання на різноманітні теми. Можливий пошук за ключовим словом. Сайт оновлюється щоденно;

• ЕМir – дозволяє шукати за частиною слова, за фразою, а також у знайденому. Має рейтинг сайтів і каталогів;

• RIN – об'ємний каталог кращих посилань в Інтернеті. Характеризується високою швидкістю і простотою навігації. Ресурси постійно оновлюються;

• Dylan – пошукова система та каталог кращих інтернет-ресурсів.

Найкращим прикладом для українських та російських каталогів може бути Карлсруеський віртуальний каталог (КВК – KVK), який стане в нагоді, якщо мова йде про пошук книг чи інших самостійних публікацій. До цього каталогу можна дістатися за адресою http://kvk.uni-karlsruhe.de, і на сьогодні він є одним з найважливіших бібліографічних пошукових систем Німеччини, що підтверджують такі дані про кількість користувачів: КВК опрацьовує щомісяця мільйон запитів з усієї країни. Цю пошукову систему для Інтернету щодо пошуку книг і журналів було розроблено у Карлсруеській університетській бібліотеці у співпраці з факультетом інформатики і підключено у липні 1996 р. З того часу каталог постійно поновлюється й оптимізується.

КВК – це метапошукова система в Інтернеті. Коли запит вводиться у пошуковий реєстр, то пошук проводиться зразу ж за 27 бібліотечними і книготорговельними каталогами, представленими в мережі. КВК охоплено 75 міліонів книжок і журналів, а це на сьогодні колосальна цифра, навіть якщо взяти до уваги, що маса книжок описується в каталозі по декілька разів. Користувач вибирає сам, в яких каталогах необхідно здійснювати пошук.

Насамперед система КВК постачає списки знайдених публікацій з форматованими короткими назвами творів, які за допомогою простого клацання мишкою перетворюються на повні назви з інформацією, де їх можна знайти. Таким чином можна дізнатися, в якій бібліотеці знаходиться певна книга і які умови її отримання на абонементі або за міжбібліотечним абонементом. Основні поняття структури цього каталогу, з якими стикається користувач при пошуку інформації, надаються у англійському та іспанському варіантах. Пошук у КВК можна здійснювати за назвою твору, за автором чи ключовим словом або ж за видавництвом, роком видання та номером ISBN-/ISSN. Зрозуміло, що КВК може знайти тільки те, що надають інтернет-каталоги. Але далеко не кожна книга, яка є в бібліотеці, описана в комп′ютерному каталозі. Бібліотеки напружено працюють над переведенням своїх фондів у цифровий варіант. Можна виходити з того, що, як правило, література останніх 10-20 рр. повністю описана в комп′ютерних каталогах.

З часу свого заснування КВК інтегрує все більше інтернет-каталогів у пошукову систему. Зараз запит передається до тринадцяти німецькомовних зведених каталогів, тобто до спільних пулів даних великих бібліотек, п′ять з них – австрійські та швейцарські. До цього додаються десять бібліотечних каталогів з ненімецькомовного зарубіжжя – з Франції, Великої Британії, Італії, Норвегії, Швеції, Іспанії та США. Серед них: Бібліотека конгресу, Національна бібліотека Франції та Британська бібліотека. Можна також здійснювати пошук у базі даних журналів (БДЖ- ZDB) – найбільшій у світі базі даних щодо газет, журналів і т. д., а також фондів. Там зазначені не тільки друковані засоби інформації, але й електронні журнали, але, на жаль, немає переліку статей.

Але можливості КВК значно більші – він здійснює пошук у каталогах великих оптовиків і книжкових інтернет-магазинів, а також у Центральному переліку антикварних книг, який зараз охоплює більш, ніж чотири мільйони творів з 900 антикварних магазинів у 17 країнах, які можна замовити за допомогою мережі Інтернет. Насамкінець, з середини липня 2002 року у виведення результатів пошуку за запитом було інтегровано також формуляр пошукової системи Google в Інтернеті. За допомогою клацання мишкою стартує подальша пошукова робота стосовно інтернет-документів.

Життя науковців, студентів і бібліотекарів вже не можна собі уявити без КВК, який за свої послуги був відзначений премією за новаторство «Iнeтбіб 1999» («InetBib 1999 Award Innovation»).

Комбіновані системи. Деякі пошукові системи мають при собі і каталог. Індекси для самої пошукової системи добуваються спайдером, а каталог поповнюється через реєстраційну форму або модераторами системи.

• Приклади комбінованих систем:

• Excite Net Directory (http://www.excite.com).

• InfoSeek (http://infoseek.go.com).

• Lycos (http://www.lycos.com).

• WebCrawler (http://www.webcrawler.com).

Ініціюючі сервери. На відміну від пошукових машин і каталогів, ціль яких – пошук інформації і наступне перенаправлення користувачів до знайдених ресурсів відповідно до запиту, ініціюючі сервери використовують більш комплексний підхід і, поряд з функціями пошуку інформації і переміщення до неї користувачів, надають тематично різноманітний інформаційний зміст. Найбільш великі з них одержали назву порталів. Одним із найпопулярних міжнародних порталів є Excite (http://www.excite.com), про який вже йшла мова як про одну з популярних міжнародних пошукових систем.