Поисковые системы возникли тогда, когда слов, записанных на языке гипертекстовой разметки, стало многовато, а отыскать нужное стало непросто.
Первая поисковая система называлась «Aliweb» (запущенная в 1993 году), существует она и до сих пор, но имеет очень низкую популярность. Второй поисковой системой стала известная «Yahoo!», созданная в 1994.
Каким же методом воспользовались основатели поисковых систем? Вы не поверите, но это метод поиска литературы в библиотеках! Сначала это были тематические каталоги с категориями, где были списки определенных сайтов. Пользователь просто находил категорию, которая его интересовала и получал список сайтов, посвященных ей. Сначала все работало очень хорошо и настроено, до тех пор, когда сайтов не стало слишком много, и поиск не усложнился. Соответственно увеличивались и количество рубрик, появлялись подрубрики.
Потом стали появляться «поисковые указания» (действовали по принципу «вопрос-ответ»). Но разобраться в результатах поиска среди 100 и больше наименований, которые появлялись в результате ответа, тоже было непросто. Поэтому выбор нескольких полезных и уместных ссылок из кучи ненужных – стал главной задачей поискового рынка на то время.
Почти все поисковые системы тогда прорабатывали 4-этапную работу: индексирование информации, занесение ее в базу данных, разрезание страниц на слова-составляющие. Таким образом, точность результата зависела от конкретности запроса, который ставил человек, а также совпадение запроса и слова-составляющей. Первыми выдавались те страницы, которые имели больший поисковый вес, точность поисковой фразы, свежую дату обновления. Таким образом, происходила ранжировка результатов поиска.
Теперь поисковые системы отличаются друг от друга собственно механизмами ранжировки. На результаты поиска системы влияют около 200-300 факторов, которые хорошо скрываются от конкурентов.