Файл: Анализ поисковых систем в сети Интернет (ПОИСКОВЫЕ ТЕХНОЛОГИИ В СЕТИ ИНТЕРНЕТ).pdf
Добавлен: 01.04.2023
Просмотров: 1161
Скачиваний: 17
SearchKing – поисковая система с упором на увеличение достоверности информации (релевантности документов). Во время построения рейтинга поисковая машина учитывает число «кликов» (щелчков) на ссылках, посещаемых в результате поиска. В связи с этим каждый пользователь невольно «голосует» за наиболее популярный сайт.
WebCrawler – с 1996 года проект принадлежит фирме Excite, поэтому на его заглавной странице находится логотип этой компании, а поисковая машина WebCrawler является составной частью Excite Network. Ее авторы обращают внимание на то, что многие более поздние технологии, включая Lycos и InfoSeek, были разработаны уже после появления WebCrawler. База данных проекта продолжает пополняться на регулярной основе, но использовать эту систему рекомендуется в ситуациях, когда необходим поиск по одному или двум ключевым словам.
2. Веб-каталоги и поисковые порталы:
LookSmart - Каталог ссылок, редактируемый вручную, усилен одной из наиболее мощных поисковых машин AltaVista - это помогло создать один из наиболее информативных порталов. Гигантская база данных AltaVista поможет отыскать необходимый сайт по заданным ключевым словам, а рубрики LookSmart помогут точнее определиться с предметом поиска.
Lycos – специализацией поисковой системы является сфера Интернет-торговли. База данных на регулярной основе пополняется. Этот портал имеет наиболее мощный специализированный каталог WhoWhere, содержащий персональные сведения о зарегистрированных пользователях Интернета, а также развитые средства по оказанию услуг электронной почты с заполнением адресных книг и возможностью формирования иерархической структуры подкаталогов для хранения личной корреспонденции. Всем посетителям в виде ответов на запрос сначала предлагаются сайты Open Directory Project, а потом ссылки из базы данных поискового механизма Lycos.
PlanetSearch Networks - портала нового типа. Он основан на онлайновых сообществах, в которые люди могли бы объединиться по увлечениям и интересам, а потом пользоваться не только механизмом поиска, но и чатами и тематическими досками объявлений. В итоге получается отличный набор тематических сайтов и соответствующих поисковых систем.
Yahoo - один из наиболее известных порталов Сети. В каталоге есть ссылки, которые максимально полно отвечают выбранной в запросе тематике. Есть интеллектуальные средства «отсечения» пустых, находящихся в разработке или исключительно рекламных сайтов, далеких от выбранной тематики. Во время поиска на Yahoo! особое внимание уделено предварительному предложению отсортированной информации в каталогах, и только если обнаруженная там информация не удовлетворит пользователя, то запрос будет передан метапоисковым машинам.
3. Метапоисковые системы:
All4One (все-в-одном) - предоставляет посетителям возможность получения результатов поиска прямо из поддерживаемых поисковых систем, то есть с привычным интерфейсом. После ввода пользовательского запроса окно браузера делится на несколько фреймов. В каждом из них предлагается перечень ссылок, найденных определённой поисковой машиной, в число которых входят и AltaVista, и Lycos, и Excite. Следует отметить, что подобный интерфейс обладает определёнными недостатками: страницы со ссылками в узких фреймах довольно неудобно просматривать. В то же время тем, кому необходим быстрый и широкомасштабный поиск с применением известных поисковых машин, All4One предоставит весь спектр нужных услуг.
Debriefing - эта метапоисковая система имеет две разные версии пользовательского интерфейса: интернациональный - на английском языке и национальный - на французском. Во время работы с ключевыми словами на английском языке сервер пользуется стандартным набором популярных поисковых систем, а вот запросы на французском языке обслуживают пять поисковых систем и каталогов Франции.
Dogpile - Мощная метапоисковая система Dogpile использует для поиска не только поисковые машины, но и FTP-серверы, а также сайты, на которых собираются последние новости, фондовые котировки и «желтые страницы» Интернета. Среди дополнительных услуг, предоставляемых этим сервером, возможность получения детальных прогнозов погоды и географических карт интересующей пользователя местности.
Google - одна из наиболее популярных метапоисковых машин в сети. Корректное отображение запрашиваемой информации. Представление информации по рейтингу, в основу которого положен индекс цитируемости страниц. Рейтинг страницы определяется по числу ссылок на нее с популярных внешних сайтов и по упоминанию этого адреса в авторитетных источниках информации.
Mamma Systems - Канадская метапоисковая система предоставляет стандартный комплекс услуг, принятый в таких случаях: используя базы данных популярных поисковых машин, она делает собственную работу очень качественно.
MetaCrawler - метапоисковая система принадлежит американской фирме Go2Net. MetaCrawler сначала выполняет поиск нужных сведений по базам данных иных систем, а потом, пользуясь своим алгоритмом, анализирует и сортирует полученные ссылки, ищет похожие, определяет рейтинг и выдает результат клиенту. Среди других услуг, оказываемых MetaCrawler, необходимо отметить возможность расширенного поиска, довольно интересное приложение MiniCrawler для поиска информации в Сети в обход сайта фирмы и программу MetaSpy, помогающую вести наблюдение за ключевыми словами в системе MetaCrawler. По данным разных информационных агентств, MetaCrawler в последние годы входит в десятку лучших метапоисковых систем в Сети.
OneSeek - метапоисковая система предназначена для тех, кто знает, что конкретно ищет.
Во время использования OneSeek требуется предварительно выбрать нужную категорию, так как поиск интересующей информации станет производиться именно по этой тематике.
Для того чтобы определиться с целями, предлагается весьма удобный интерфейс, позволяющий оптимизировать поиск. Он сэкономит время и поможет избежать лишних результатов.
ProFusion - метапоисковую систему ProFusion отличает от других аналогичных систем наличие функции автоматического выбора трех самых подходящих для этого запроса поисковых машин.
Это означает, что после ввода ключевого слова ProFusion старается сузить область поиска, определить тематику, к которой относится запрос, и выбрать три оптимальные для этого случая поисковые машины.
Также ProFusion предоставляет персональный сервис по сохранению ключевых слов запроса, а затем регулярно автоматически сканирует выбранные поисковые машины, а если находит новые сведения по интересующей теме, то сообщает об этом пользователю (или создает для него «теневую» базу данных). Разрабатываются и иные вспомогательные функции системы.
Proteus - представляет собой скорее даже не метапоисковую систему, а средство переадресации запросов на иные поисковые машины.
Здесь отсутствует алгоритм сортировки полученных ссылок - просто на одной странице находится окошко для ввода ключевых слов и большое количество кнопок для поиска во внешних поисковых системах.
SavvySearch - система оказывает услуги расширенного поиска в Сети с 1998 года.
При запросе клиента исследуются 200 внешних баз данных, сборники прайс-листов и целая совокупность специальных электронных библиотек и справочников. SavvySearch имеет простой и продуманный интерфейс, удобные функции выполнения поиска. Также система предлагает много дополнительных услуг, количество которых непрерывно увеличивается.[7]
ГЛАВА 2. СРАВНИТЕЛЬНЫЙ АНАЛИЗ ПОИСКОВЫХ СИСТЕМ
Сегодня самым мощным и оперативным источником информации является Интернет. Собственный сайт в сети есть почти у каждой крупной фирмы, организации или компании. В сети Интернет есть электронные варианты многих журналов и газет, через Интернет вещают сотни телекомпаний и радиостанций. В современном обществе почти нет области человеческой деятельности, которая не была бы представлена в сети. Умение быстро находить необходимую информацию сегодня так же необходимо как умение читать и писать. Одной из первых проблем, с которыми сталкивается пользователь, подключаясь к сети, является проблема выбора поисковой системы. Каталоги (общие и специальные), поисковые системы, каталоги поисковых систем, тематические коллекции ссылок, рейтинги и т.п., могут стать помощником для эффективного поиска информации, а могут помочь заблудиться в дебрях Интернета. Определённые рекомендации по выбору поискового указателя довольно быстро стареют. Ситуация в Интернете изменяется буквально на глазах. Не проходит и полугода, чтобы что-либо не поменялось и в поисковых системах. Та система, которая была самой лучшей вчера, может оказаться не наилучшей сегодня и очень плохой завтра.
- Яндекс
«Яндекс» — российская ИТ-фирма, владеющая одноимённой системой поиска в Сети и интернет-порталом. Поисковая система «Яндекс» считается 4-ой среди поисковых сайтов мира по числу обработанных поисковых запросов (больше 6,3 млрд. в месяц, 0,5% от мирового количества, статистика за июнь 2019 года). Поисковиком в мире пользуются свыше 50 млн. человек. По состоянию на 14 июня 2019 года, в соответствии с рейтингом Alexa.com, по популярности сайт yandex.ru находится на 20-й позиции в мире и 2-й позиции в России. Поисковую систему Yandex.ru официально анонсировали 23 сентября 1997 года, и сначала развивали в рамках фирмы CompTek International. Как отдельная фирма «Яндекс» появилась в 2000 году. В мае 2011 года Яндекс осуществил первичное размещение своих акций, заработав в результате больше, чем какая-нибудь из Интернет-фирм со времён IPO поисковика Google в 2004 году.
Главным и приоритетным направлением фирмы считается разработка поискового механизма, но за годы работы «Яндекс» стал мультипорталом. В 2019 году «Яндекс» предлагает свыше 50 сервисов. Наиболее популярными являются: Яндекс.Картинки, Яндекс.Почта, Яндекс.Карты, Яндекс.Новости, Яндекс.Погода и другие.
Язык поисковых запросов
Характерная особенность Яндекса — возможность точной настройки поискового запроса. Это реализовано за счёт гибкого языка запросов. Так, к примеру, для операции исключения можно указать область действия: запрос A ~~ B найдёт документы (страницы), в которых присутствует А, но не присутствует В, а запрос А ~ Б — документы, где слово Б не присутствует со словом А в одном предложении. По аналогии, оператор & ищет сочетания ключевых слов в предложении, а && — во всём документе.
Оператор «!» помогает отключить морфологию для определённого слова, а «!!» позволяет указать нормальную форму, что позволяет обойти некоторые проблемы, связанные с омонимией. К примеру запрос !!Петров будет находить Петрова и Петровых, но не Петра.
Результаты поиска.
По умолчанию Яндекс выводит по 10 ссылок на каждой странице выдачи результатов, в настройках результатов поиска можно повысить размер страницы до 20, 30 или 50 найденных документов. Иногда порядок сайтов на таких страницах может отличаться, так как обновление баз для таких результатов происходит не одновременно.
Если по запросу найдено очень много ссылок, страница результатов предлагает ограничить диапазон поиска — по региону (то есть по диапазону IP) или по дате. Если по какому-нибудь слову или словам ничего не найдено, предлагается поменять его/их на похожие (поскольку предлагаемые варианты зависят от частоты нахождения похожих слов, порой возникают забавные ситуации). Также, предлагается исправить слова, набранные не в той раскладке клавиатуры.
Качество поиска.
Время от времени алгоритмы Яндекса, отвечающие за релевантность выдачи, изменяются, что ведёт к изменениям в результатах поисковых запросов. Такие изменения, официально объявленные, происходили, к примеру, в марте 2004 года, августе 2005 года и январе 2007 года; по неофициальным сведениям, их существенно больше (например, в августе-сентябре 2007 года). Крупное изменение произошло в ноябре 2009 года, когда была выложена обновлённая версия поисковой программы «Снежинск». Последнее такое изменение произошло в декабре 2010-го, когда Яндекс добавил новую поисковую технологию «Спектр» (версия «Краснодар»). Она позволяет учитывать потребности пользователей, которые не были явно сформулированы в запросе. К примеру, по запросу [Бетховен] пользователям покажут результаты и про биографию композитора, и его произведения, и фильм «Бетховен».
В частности, указанные изменения направлены против поискового спама, приводящего к нерелевантным результатам по определённым запросам (реже — по целым семействам запросов).
Сайты, которые «Яндекс» не индексирует или ограничивает ранжирование:
- Копирующие или переписывающие сведения с иных ресурсов и не создающие оригинального контента.
- Единственной целью которых оказывается перенаправление пользователя на иной ресурс, автоматически (редирект) или добровольно.
- С автоматически сгенерированным (бессмысленным) текстом.
- С каталогами (программ, статей, организаций и т.д.), если они выступают лишь агрегаторами контента, не создают тексты и описания самостоятельно и не предлагают никакого уникального сервиса.
- С невидимым или слабовидимым текстом или ссылками.
- Отдающие различный контент пользователям и роботам поисковых систем (клоакинг).
- Предлагающие товары или информацию по партнёрским программам, но не представляющие какой-либо ценности для пользователя.
- Пользующиеся обманными техниками (к примеру, вредоносный код, скрипты, настройки серверов), перенаправляющие пользователей на сторонние ресурсы либо меняющие окно результатов поиска на страницы иных ресурсов во время перехода из поисковых систем.
- Содержащие перечни поисковых запросов (многократное повторение и перечисление ключевых слов), используемые только для обмана поисковой системы и манипулирования итогами её работы, в том числе использование компонентов страниц, скрывающих ключевые слова, к примеру, с помощью скроллинга или иных технических приёмов.
- Группы сайтов одного владельца/компании, предоставляющие пользователю одни и те же товары или услуги, созданные для заполнения нескольких позиций в результатах поиска и сбора трафика.
- Немодерируемые форумы, доски объявлений, содержащие большое количество ссылочного спама.
- Ставящие внешние ссылки только для обмана поисковых систем и «накачивания» релевантности и не оказывающиеся рекомендацией автора посетить ресурс.
- Сайты или группы сайтов, интенсивно ссылающиеся друг на друга (линкфармы).
- Страницы сайта с результатами поиска.