Метапоисковые системы

Стандартная ситуация. Некоторая страница проиндексирована на одной поисковой машине и не проиндексирована на другой. Решением такой задачи занимаются метапоисковые системы. Они не имеют своей базы, а посылают запрос ко многим поисковым машинам и полученные ответы сортируют, удаляют повторы и предоставляют пользователю.

Рис. ІѴ.47. Метапоисковая система Metacrawler

В начале появления Web количество проиндексированных страниц крупнейшими поисковыми системами в процентном отношении ко всем страницам было невелико. Тогда помогал метапоиск. Нынче этот процент индексированных страниц весьма велик и метапоисковая машина выдает не всегда качественные результаты по ревалентности при больших объемах. Время поиска также увеличено — ведь метапоисковой системе требуется опроситъ несколько других серверов и, получив результаты, еще самостоятельно обработать их. Самые большие системы такого рода, это Metacrawler (www.metacrawler.com) (рис. IV.47) и DOG PILE (www.dogpile.com) (рис. IV.48). К ним имеет смысл обращаться когда обычные поисковые системы не дали результатов.

Рис. IV.48. Метапоисковая система DOGPILE