Файл: Анализ поисковых систем в сети Интернет (Архитектура современных ИПС для Интернета).pdf

Глава 3 Сравнительный поисковых систем

3.1 популярных мировых и информационно-поисковых

Рейтинг мировых и информационно-поисковых , поможет нам наиболее популярные системы, которые в мы будем .

Google первая популярности поисковая в мире обрабатывающая 40 миллиардов запросов в (доля рынка 83,4 %), и более 8 миллиардов -страниц. Google находить информацию 191 языке (на 15 2012) [15]. Второе место (с отрывом) у поисковой ! – 6,32% рынка. Третье занимает крупнейший поисковик Baidu. – 4,96% рынка[20]. Уверенные последнего связаны с , что на Китая заблокированы и , и Yahoo. Четвертое занимает Bing(),она является молодой поисковой от Microsoft, успех главным определяетсяогромным массивом данных, который у компании за существования браузера , который в дальнейшем ее инженерам поисковой алгоритм, пользователямрелевантную выдачу.[27]

поисковых машин , Google занимает 70% мирового рынка, а , семь из находящихся в сети обращаются к его в поисках информации в . Сейчас регистрирует около 50 миллионов запросов и индексирует 8 миллиардов веб- [9].

Информационно-поисковая Google быларазработана в 1998 Стэндфордского университета Брином и Лари , которые применили ранжирования документов PageRank, где из ключевых является определение «» конкретного документа основе информации о , ссылающихся на . Говоря общими , чем больше ссылается на документ, и чем авторитетнее, тем становитсяданный документ. значение авторитетности (другими словами, количество ссылок PageRank) относится к называемым статическим (т.е. независящим от запроса) и учитывается определении релевантности конкретному запросу весовой коэффициент. с этим Google для определения документа не текст самого , но и текст на него. технология позволила обеспечить выдачу релевантных результатов фоне других . Довольно быстро стал лидировать в опросах по показателю, как пользователей результатами . Google осуществляет по документам более чем 35 , в том числе . В настоящее время порталы и специализированные предоставляют услуги информации в Интернете базе Google, делает задачу позиционирования сайтов в еще более . Google проводит своей поисковой примерно раз в недели. Во этого усовершенствования, называемого Googledance, обновление базы основе информации, роботами за , прошедшее с предыдущего , и перерасчет значений документов [15].

Также определенное количество с достаточно большим PageRank, информация о в поисковой базе ежедневно, однако PageRank пересчитывается во время . Нормированное значение для конкретного , загруженного в браузер, узнать, скачав и GoogleToolBar - специальную инструментов для с этим поисковиком. смотря на , что в поисковике форма для добавления страницы в , Google предпочитает находить новые по ссылкам с известныхстраниц,и не индексировать добавленную форму страницу, в его базе найдется ни страницы, ссылающейся нее.

Так на страницах поиска Google платные (payperclick) объявления конкурирующих , которые основывают объявления на . «В то время сервис мог помочь увеличить , некоторые пользователи «», так как использует известность для продажи объявлений, как , конкурирующим компаниям». сгладить этот Google предложил эту возможность желающих компаний.

технология, позволяющая настраивать результаты по поисковым . Пользователь может результаты из и поднимать вверх . Технология была компанией Google 2009 года и проработала осени. В настоящий (4 мая 2013 года), в поиска осталась для включения «», но в выдаче элементы управления . Другие поисковые подобной функциональности не предоставляли.

22 2010 года компания голосовой поиск в . Чтобы осуществить , необходимо нажать в кнопку рядом строкой поиска и свой запрос, отправит ваш на сервер и , будет выдавать с распознанным вашим и результатами поиска нему.

По праздника или даты какой- широко известной , стандартный логотип у региональных доменов меняться на , имеющий определённую , смысл. Например, случаю дня Наполеона Орды 11 2010 года на белорусского домена появились акварели известного художника, 6 поздравляли со 121 - Марка Шагала ( был в виде из фрагментов работ). После ожидания 22 марта 2011 Google выиграл на "GoogleDoodle".

система Yahoo — из самых (создана Дэвидом и Джерри Янгом в 1994года) по день остается и популярной из , традиционно сочетая , как по словам, так и с иерархического дерева [6].

Нынешнее развитие можно определить движение в онлайн, . Yahoo быстро эту область -услуг, но одна проблема: Yahoo! не на это . Не была в 1994 заложено в него "" составляющая, ее "" Тим Кугл годами позже. возникает угроза атак через незащищенную область.

из новшеств системы Yahoo - задач для Firefox,. Этот помогает пользоваться Yahoo, не на официальный , а лишь используя кнопки панели.

1 2005 года поисковик , которому принадлежит 200 миллионов адресов почты по миру, анонсировал новой системы текстов, фотографий и документов, содержащихся в .

Необходимость такого возникла вслед увеличением объёма данных, ведь пользователи создают почтовые архивы. конкурентом Google и почтовым сервисом , Yahoo для почты предлагает 1 гигабайт бесплатного , или 2 гигабайта годовому абонементу. « только вы возможность хранить информации, вам и расширенные поисковые », – объясняет Эрик , аналитик компании .

Пользователи поисковой Yahoo, в свою , смогут теперь возможности детализированного слов в названии непосредственно в тексте , а также в присоединенных , не открывая . Результат поиска в трёх строках с всех атрибутов. панели справа все похожие . Найденные фотографии на экран в виде, что облегчает поиск. также учитывает ошибки, позволяя слова лишь первым буквам.

планирует предложить систему небольшому американских пользователей, а распространить её всему миру. стороны клиентов не потребует дополнительных усилий. « услуга станет, , в левом верхнем страницы вашего ящика появится баннер», – обещает Yahoo.

По comScoreMediaMetrix на этого года, Yahoo принадлежит 219 адресов электронной , что составляет 31,5% рынка, уступая Microsoft с 221 миллионом сервиса Hotmail (35,5% ) [6].

Baidu – лидер китайских поисковых . По количеству запросов поисковый Байду стоит 3 месте в мире (3 428 миллионов; с долей в поиске 5,2 %). Уже в года в Китае 170 млн. пользователей поиском информации в . Аналитик J.P. Морган Вей исходит в актуальном анализе того, что число вырастет в следующих трех, лет до 100 . пользователей. Гигантский с высокими доходами Baidu, сравнивают прибыль, которую достигает в США с похожей бизнес- [18].

Теперь опишем популярные поисковые российского рынка ресурсов.

Большинство «» поисковых систем и ищут тексты многих языках — , белорусском, английском и . Отличаются же от «всеязычных» , индексирующих все подряд, тем, в основном индексируют , расположенные в доменных , где доминирует язык или способами ограничивают роботов русскоязычными . На сегодняшний самой популярной поисковой системой Яндекс – 54% всех запросов.

Основное русскоязычных поисковых от иностранных – то, что поисковые системы, поиск на языке, не русскую морфологию. В части сети работают около десятков поисковых , но подавляющие пользователей работает с несколькими, подробно на самых .

Яндекс – на наиболее популярная поисковая система, к ней обращаются 35 миллионов пользователей Internet. Начала работу во половине 1997 года морфологию русского . История компании «» началась в 1990 году с поискового программного в компании «Аркадия». два года были созданы информационно-поисковые – Международная Классификация , 4 и 5 редакция, а также Товаров и Услуг. системы работали под DOS и проводить поиск, слова из словаря, с использованием логических операторов. В1993 «Аркадия» стала компании CompTek. В 1993-1994 программные технологии существенно усовершенствованы сотрудничеству с лабораторией Ю. Д. (Институт Проблем Информации РАН). В , словарь, обеспечивающий с учетом морфологии языка, занимал 300Кб, то целиком грузился в память и работал быстро. С этого пользователь мог в запросе любые слов [18].

Слово придумал за лет до один из и старейших разработчиков механизма. «Яndex» «Языковой index», , если по-, «Yandex» - «YetAnotherindexer». 4 года публичного Яndex возникли и толкования. Например, в слове «Index» с английского первую ("I" – «Я»), получится «Яndex».

В 1996 года был алгоритм построения . Отныне морфологический перестал быть к словарю - если -либо слова в нет, то наиболее похожие него словарные и по ним модель словоизменения. В время Интернет в только начинался. через полгода очевидно, что не отделяет от создания глобальной поисковой . Объем Рунета тогда всего гигабайт. Осенью 1997 был открыт .Ru.

Помимо системы, сегодня – огромный портал с набором широко сервисов, такими каталог, Яндекс. , и другие. Официально машина Yandex. была анонсирована 23 1997 года на Softool. Основными чертами Yandex. на тот были проверка документов (исключение в разных кодировках), а ключевые свойства ядра Яндекс, а : учет морфологии языка (в том и поиск по словоформе), поиск с расстояния (в том в пределах абзаца, словосочетание), и тщательно алгоритм оценки (соответствия ответа ), учитывающий не количество слов , найденных в тексте, и «контрастность» слова ( относительную частоту данного документа), между словами, и слова в документе [19].

язык запросов, производить поиск самым различным . Так, например, операции исключения указать область : запрос A ~~ B найдёт (страницы), в которых А, но не В, а запрос А ~ Б - документы, слово Б не со словом А в предложении. Аналогично, & ищет сочетания слов в предложении, а && - всём документе.

умолчанию Яндекс по 10 ссылок каждой странице результатов, в настройках поиска можно размер страницы 20, 30 или 50 найденных . Иногда порядок на этих может отличаться, как обновление для этих происходит не .

Время от алгоритмы Яндекса, за релевантность , меняются, что к изменениям в результатах запросов. Такие , официально объявленные, , например, в марте 2004 , августе 2005 года и 2007 года; по сведениям, их больше (например, в -сентябре 2007 года). такое изменение в ноябре 2009 года, была выложена версия поисковой «Снежинск».

В частности, изменения направлены поискового спама, к нерелевантным результатам некоторым запросам ( - по целым запросов).

Rambler– поисковая система Интернет, запущена в 1996 , на сегодня по популярности с более 25 миллионов в месяц. Помимо системы, сегодня один из порталов Русскоязычной Интернета с большим широко известных , таких как Рамблер, Рамблер-, Рамблер-ICQ Рамблер-ТВ. сути сегодня - больше, чем поисковая система и сервисов, это медиагруппа. Поисковая «Рамблер» начала в октябре 1996 года, стартовом этапе всего 100 тысяч документов. «Рамблер» не был первой отечественной поисковой системой, однако в первый год своего существования (когда весь русский веб с приемлемой степенью правдоподобия индексировался «Рамблером», «Апортом», «Русской поисковой машиной», а также шведской и калифорнийской AltaVista) вынес основной груз поисковых запросов [18].

Вторая версия «Рамблера» начала разрабатываться летом 2000 года, в марте нынешнего года приняла достаточно законченные очертания. В нее были введены функции, давно уже имевшиеся в конкурирующих системах. Она учитывает координаты слов, обучена строгой и нечеткой морфологии, связывает поиск с каталогом, в качестве которого используется Top100 (http://top100.rambler.ru/), группирует результаты поиска по сайтам, ищет по числам. Достаточно удачная архитектура продукта позволяет «Рамблер» иметь для поисковика количество серверов в 2 раза меньшее, чем у «Яндекса», и в 3 раза меньшее, чем у «Апорта» [27].

Апорт– третья попопулярности на сегодня поисковая система с обращением более 16 миллионов посетителей в месяц. Апорт позволяет пользователям осуществлять полнотекстовый поиск документов c учетом морфологии русского языка в запросах. Поисковая система построена на основании новейших достижений в области информационного поиска и использует уникальные алгоритмы сортировки найденных результатов. Разнообразные специализированные поиски (Знакомства, Товары, Новости, Рефераты, MP3 и др.) дают пользователям дополнительные возможности находить различную информацию в Сети. В поисковую машину интегрирован один из крупнейших в Русскоязычной части Интернет каталогов Интернет-ресурсов «Апорт-каталог».

Поисковая машина «Апорт» была впервые продемонстрирована в феврале 1996 года на пресс-конференции «Агамы» по поводу открытия «Русского клуба». Тогда она искала только по сайту russia.agama.com. Потом она начала искать по четырем, потом по шести серверам. В итоге, день рождения и фактический старт системы сильно «размазались» по времени, а официальная презентация «Апорта» состоялась только 11 ноября 1997 года. К тому времени в его базе был проиндексирован первый миллион документов, расположенных на 10 тысячах серверов. Создателем системы выступила компания «Агама» - разработчик программного обеспечения для платформы Windows, главным из которых являлся корректор орфографии «Пропись». Лингвистические разработки «Агамы» использовались при создании поисковой машины, в которой, скажем, в отличие от «Рамблер», изначально учитывалась морфология слов и осуществлялась по желанию клиента проверка орфографии запроса.

Важнейшими свойствами первой версии «Апорта» являлся перевод запроса и результатов поиска на английский язык и обратно, а также реконструкция всех проиндексированных страниц из собственной базы (что означает возможность просмотра страниц, уже несуществующих в оригинале).