Как развивались поисковые системы в 1990-е годы?

В 1990-е годы развитие поисковых систем было связано с появлением веб-краулеров. gallerix.ru Эти программы автоматически перемещались по сети, переходя по ссылкам, чтобы собирать и индексировать веб-страницы. gallerix.ru

Одним из первых веб-краулеров был «Арчи», разработанный Аланом Эмтеджем в 1990 году. gallerix.ru Он индексировал сайты FTP (File Transfer Protocol), чтобы помочь пользователям найти загружаемые файлы. gallerix.ru

В 1993 году появился World Wide Web Wanderer Мэтью Грея, что положило начало веб-индексированию в том виде, в котором мы его знаем. gallerix.ru За ним последовала разработка Aliweb (Archie-like Indexing for the Web), которая позволяла веб-мастерам добровольно отправлять свои страницы на индексацию. gallerix.ru

Первой поисковой системой, объединившей в себе краулер и индексируемую базу данных, стал WebCrawler, запущенный в 1994 году Брайаном Пинкертоном. gallerix.ru В отличие от предыдущих поисковых систем, WebCrawler индексировал полный текст веб-страниц, значительно повышая точность и полноту поиска. gallerix.ru

В середине 1990-х годов появилось несколько коммерческих поисковых систем, которые стремились извлечь выгоду из растущего спроса на услуги веб-поиска. gallerix.ru Одной из самых заметных стала компания Lycos, основанная Майклом Лореном Маулдином в 1994 году в Университете Карнеги-Меллон. gallerix.ru Lycos быстро стал популярным благодаря обширному индексу и расширенным возможностям поиска. gallerix.ru

Другим значимым игроком стала компания AltaVista, запущенная в 1995 году корпорацией Digital Equipment. gallerix.ru AltaVista представила несколько инноваций, включая быструю и масштабируемую архитектуру, запросы на естественном языке и расширенные функции поиска, такие как булевы операторы. gallerix.ru

В 1996 году в рунете появился первый полноценный поисковик — «Рамблер». www.kommersant.ru Его создание было продиктовано практической необходимостью: зарубежные системы плохо работали с кириллицей, путали кодировки и выдавали некорректные результаты. www.kommersant.ru