Что такое поисковые системы и как они работают
Поисковая система - это программно-аппаратный комплекс, который предназначен для осуществления поиска в сети Интернет. Он помогает пользователям быстро найти необходимые сведения, реагируя на запрос пользователя выдачей списка ссылок на источники информации. Достаточно набрать в строке поиска интересующий вопрос или фразу, нажать на кнопку «Поиск» или «Search», и через несколько секунд поисковая система выдаст необходимую информацию.
Поисковые системы классифицируют по способу работы и по области использования. По данным LiveInternet.ru, в 2012 году 53,8% российских пользователей предпочитали Яндекс, 34,2% – Google 9,4% – Поиск Mail. ru и 1,2% – Rambler .
Каждая поисковая система имеет собственный алгоритм поиска, который определенным образом анализирует релевантность сайтов, чтобы выдать результат, наиболее соответствующий запросу пользователя.
Типы поисковых систем по способу работы
Индексные поисковые системы собирают информацию в Интернете автоматически, с помощью специальных программ-роботов, посещающих веб-страницы. Они осуществляют всесторонний поиск по ключевым словам. Примерами таких поисковых систем являются Google, AltaVista, HotBot, Яндекс.
Индексная поисковая система состоит из трех основных компонентов:
Агент (паук или кроулер)
Агент – это специальная программа, которая запускается на сервере поисковой системы с целью посещения веб-страниц. Когда агент находит новую страницу, удовлетворяющую алгоритму поисковой системы, он индексирует ее, то есть добавляет в базу данных поисковой системы. Посещать страницы агенту помогает система гиперссылок, благодаря которой программа может бесконечно переходить с одной страницы на другую.
База данных поисковой системы
В ней хранятся все найденные и обработанные документы (индексы). Индекс позволяет быстро совершать поиск и обычно состоит из списка ключевых слов и информации о них (позиции в тексте, веса и др.). База регулярно обновляется, и именно из последнего ее обновления выдаются результаты для поставленного запроса. Частота обновления базы данных – критически важный параметр любой поисковой системы. Чем чаще происходит ее обновление, тем качественнее поисковая система.
Поисковый механизм
Поисковый механизм – интерфейс для взаимодействия пользователя и базы данных, то есть та самая программа, с которой мы непосредственно имеем дело.
Основные возможности языка запросов поисковой системы Google и Yandex
Если вам необходимо найти слово или фразу в точно таком виде, как вы вводите, без всяких изменений форм и порядка слов, то заключите свой поисковый запрос в кавычки. Это часто бывает удобно для поиска фильма по его названию, текста песни по строчке или отрывка из книги.
Если вам необходимо исключить из результатов поиска в Google все страницы, содержащие определенное слово, то поставьте перед этим словом в запросе знак минус (– ). Например, если ввести в строку поиска «вирус –компьютерный », то система выдаст документы, в которых не встречается ключевое слово «компьютерный». В Яндексе же подобная операция производится с помощью символа тильда (~ ), поставленного в запросе перед словом, которое нужно исключить из поиска.
Оператор site: в Google позволяет осуществлять поиск на конкретном сайте. Например, если набрать в строке поиска Google «поступление site:www.msu.ru », то система будет искать информацию о поступлении именно на сайте МГУ. В Яндексе подобная операция осуществляется с помощью оператора host:
Символом звездочка (*) можно заменять в запросе неизвестные слова. Например, «буря * небо кроет ».
Оператор define: в Google позволяет искать определения слова, указанного в запросе.
В обычном режиме Google старается найти страницы, содержащие все указанные слова. Если же вставить между словами оператор OR (заглавными буквами), то система покажет страницы, включающие в себя как минимум одно из этих слов. Например,купить квартиру в Москве OR Подмосковье . В Яндексе же подобная операция производится с помощью символа прямой слэш (|) , поставленного между словами запроса, например;билеты Лондон | Париж ;.
Чтобы получить в выдаче Google диапазон чисел «от и до», нужно между ними поставить две точки, например, «снять квартиру $1000..$1500 ».
Язык запросов поддерживают многие поисковые системы. Перед их использованием рекомендуется посмотреть описание в разделе помощи сайта конкретной поисковой системы, которую планируется использовать.
Особенности работы с поисковыми системами
Использование поисковых систем может стать причиной проникновения на компьютер пользователя вредоносной программы. Выдавая результаты по запросам пользователей, поисковые системы могут выдавать адреса зараженных сайтов.
Также нужно иметь в виду, что поисковые системы выдают лишь ссылки на релевантные сайты, но не отвечают за достоверность информации, которая на этих сайтах содержится. Задача поисковых систем – максимально быстро и точно ответить на запрос, поэтому не стоит безоговорочно доверять всей информации, которая находится по выдаваемым ссылкам. Сайты, полученные при поиске, могут содержать некорректную или откровенно ложную информацию, которая может ввести в заблуждение пользователя, ведь далеко не все источники, скорее меньшая их часть, пишутся и проверяются действительно компетентными людьми. Например, информацию на таком популярном ресурсе как Википедия размещают все желающие, следствием чего является высокий процент ошибок в статьях. Рекомендуется крайне осторожно выбирать источники для школьных, студенческих и научных работ, да и вообще перепроверять любую информацию, особенно из совершенно незнакомой области.
Рекомендации по безопасному использованию поисковых систем
- Старайтесь внимательно относиться к сайтам, выдаваемым поисковой системой, поскольку они могут содержать вирусы. Соблюдайте меры предосторожности: не стоить заходить на сомнительные сайты, особенно если антивирус предупреждает о нежелательности такого действия.
- Обязательно используйте и регулярно обновляйте антивирусные средства защиты – программы, позволяющие обнаруживать и удалять вредоносные программы, восстанавливать зараженные файлы, а также предотвращать проникновение вирусов на устройство.
- Проверяйте достоверность информации, полученной из Интернета. Самый простой способ – сравнить хотя бы несколько источников, которые не дублируют друг друга.
- Время от времени проверяйте, какую информацию выдают поисковые системы, когда вы пытаетесь найти в них сведения о себе. Это поможет вам узнать, нет ли в Сети ваших личных данных, которые вы предпочли бы не делать общеизвестными, и в случае необходимости вовремя подать жалобу руководству соответствующих сайтов.
В глобальной сети Интернет можно найти информацию по любой интересующей теме. Но самое трудное в работе с сетью Интернет — найти нужную информацию. Т. к. Интернет не имеет четкой централизованной структуры, развивается хаотично, и в мире появляются все новые и новые серверы, вопросы поиска информации становятся очень актуальными.
Поисковые системы значительно облегчают работу в Интернет и помогают нам быстро найти нужную информацию в огромном массиве серверов Интернет. Во всемирной паутине Интернет находится несколько тысяч поисковых систем, среди которых есть как уже хорошо зарекомендовавшие себя, так и менее известные.
Наиболее популярные поисковые системы
- Яндекс —
средство полнотекстового поиска информации с учетом морфологии русского языка; поиск по сайтам, своему каталогу, новостям, товарам, географическим картам, словарям, блогам, картинкам, документам Microsoft Office и Adobe Acrobat PDF
- Яндекс —
- Rambler
(ОАО «Рамблер Интернет Холдинг») — поиск по сайтам с учетом морфологии русского и английского языков; имеет и каталоговую систему поиска.
- Rambler Lite: поисковая система — краткий вариант страницы поиска
- NIGMA — интеллектуальная поисковая система (МГУ им. М. В. Ломоносова и Stanford University) — поиск документов, картинок, книг, новостей через Google, Yahoo, MSN, Yandex, Rambler, Altavista, Апорт; также система предоставляет уникальный поиск по химическим формулам и реакциям
- Google — поиск по сайтам (есть возможность поиска по русскоязычным сайтам); поиск документов в форматах Adobe Acrobat PDF, Microsoft Office, PostScript, Corel WordPerfect, Lotus 1-2-3 и др.; поиск картинок, видео, новостей, поиск по картам; возможность поиска по русскоязычным и российским сайтам; есть система перевода текста на др. языки (49 языков)
- Bing (Microsoft Corp.) — поиск по сайтам, изображений и видео; возможность поиска по русскоязычным и российским сайтам; есть система перевода текста на др. языки (22 языка)
- Yahoo! (Yahoo) — поиск по сайтам, адресам E-Mail и др.
Поиск по ключевым словам. Язык запросов поисковой системы
Поисковая система обычно имеет поле для ввода ключевых слов, по которым она находит документы, содержащие эти ключевые слова. Чем лучше (качественнее) составлен запрос к поисковой машине, тем меньше общее количество найденных документов, и больше из них документов, соответствующих тому, что Вам требуется. Если запрос очень простой или составлен неграмотно, то поисковая машина может Вам выдать несколько миллионов документов, которые Вам не просмотреть за всю жизнь.
Используя язык запроса, содержащий логические операции (логические операторы AND , OR , NOT , скобки и др.), префиксы обязательности присутствия ключевых слов в документе «+ » и «- » (при поиске по узкоспециализированным терминам — предпочтительней использовать), расположения ключевых слов в документе рядом или на определенном расстоянии и т. д.) и др. элементы, и большее количество связанных ими ключевых слов, можно значительно сузить область поиска и более качественно составить запрос к поисковому серверу. Следует учитывать, что разные поисковые системы могут иметь как различающиеся языки запросов, так и очень похожие.
Некоторые поисковые системы дополнительно имеют функцию расширенного поиска , позволяющую пользователю более точно описать то, что ему конкретно нужно и без знания языка запроса. Функцию расширенного поиска имеют, например, поисковые системы Яндекс и Google .
Основные типы поисковых систем. Какой поисковой системой воспользоваться
Существует 2 основных типа поисковых систем Интернет: индексные и классификационные (каталоговые). Индексные поисковые системы (например, Яндекс , Google , Bing , Rambler и др.), работая в автоматическом режиме обновления своей информации, просматривают в Интернет содержимое серверов, индексируя информацию, содержащуюся в них и внося информацию о расположении слов на страницах сайтов в свои базы данных. Каталоговые системы поиска (например, Rambler , Yahoo! и др.) содержат тематически структурированный каталог серверов, и чаще всего пополняются вручную. Обычно на WWW-странице классификационной поисковой системы содержится и поле для ввода ключевых слов для поиска в собственной базе данных. В каталоговой системе поиска можно, начав с более крупной тематической рубрики, и постепенно спускаясь дальше по рубрикам, прийти к ссылке на нужный Вам сайт. В одних случаях бывает удобней воспользоваться первым типом поисковых систем, в других — вторым. Естьпоисковые системы, сочетающие в себе оба принципа работы. В частности, многие индексные поисковые системы имеют и каталоговую систему поиска. Также поисковые машины могут использовать и какие-то другие принципы методы поиска.
Многие поисковые системы преобразовались в Интернет-порталы, объединяющие в себе большое количество ресурсов и сервисов. На страницах таких порталов можно прочитать новости, ознакомиться с программой телепередач, узнать о погоде, курсах валют, воспользоваться картографическим сервисом и мн. др.
Наиболее популярные российские поисковые системы имеют возможности поиска с учетом особенностей русского языка.
Для поиска одновременно в нескольких поисковых системах можно воспользоваться так называемыми поисковыми метамашинами, обращающимися сразу к нескольким поисковым средствам, например, NIGMA .
Существуют также поисковые системы, специализирующиеся по поиску по одной какой-либо теме (например, по информационным технологиям, по музыке, по ресурсам, посвященные природе и т. д.)
По принципу действия различают несколько видов поисковых систем. Наиболее распространенными есть два основных типа: поисковые каталоги и индексные поисковые системы. Существуют также рейтинговые системы, поисковые сервера специального назначения, метапоисковые сервера.
2. Поисковые каталоги
Поисковые тематические каталоги (Subject Directory) организованы по тем самым принципам, что и тематические каталоги библиотек. На основной странице поискового каталога сокращенный список больших тематических категорий, таких, как Образование (Education), Наука (Science), Бизнес (Business), Искусство (Art) и т.п. Каждая запись в списке категорий - гиперссылка. "Нажатие" на нее открывает следующую страничку поискового каталога, на котором эта тема представлена. Элементами наиболее низкого уровня есть ссылка на отдельные Web-странички и сервера вместе с кратким описанием их содержания. Продолжая углубление в тему, можно дойти к списку Web-страничек и выбрать тот ресурс, который лучше подходит для решения конкретной информационно-поисковой задачи.
Какие виды поисковых каталогов Вы знаете?
Различают поисковые каталоги общего назначения и специализированные. Поисковые каталоги общего назначения содержат в себе ресурсы различных профилей. Специализированные каталоги объединяют только документы, посвященные определенной тематике. Такие каталоги лучше охватывают ресурсы в своей области и создают наиболее адекватную рубрикацию.
4 По какому принципу организованные индексные поисковые системы?
Принцип работы с индексными поисковыми системами базируется на использовании ключевых слов. Разыскивая информацию из некоторой темы, пользователь должен подобрать ключевые слова, которые описывают эту тему, и задать их индексной поисковой системе как запрос. Пользователям такой поисковой системы предоставляется форма, или пульт управления поиском, для введения ключевого слова (слов) или фразы. Поисковая система находит в своих базах данных, которые называются индексами или указателями) адреса Web-ресурсов, которые содержат ключевые слова, и выдает клиенту страницу с ссылками на эти ресурсы. Такая Web-страничка называется отчетом о результатах поиска.
Какие существуют виды индексных поисковых систем?
Существуют следующие виды индексных поисковых систем:
глобальные;
локальные;
региональные;
специализированные.
При формировании собственной базы данных индексная поисковая система может следить за обновлением заведомо заданного набора документов, каталогов или конечного числа узлов, отобранных по определенному принципу. Такие системы, реализованные в Интернете, называют локальными. Глобальные поисковые системы, в отличие от локальных, решают более сложная задача - наиболее полно охватить все информационные ресурсы Сети.
Построение региональных и специализированных поисковых систем предусматривает активную фильтрацию информации. Специализация поисковой системы осуществляется на базе некоторого профиля или тематики. Это может быть поиск людей и организаций, компьютерного оснащения, файлов мультимедиа и т.п.
Региональные поисковые системы в основном фильтруют информацию на основе распознавания домена верхнего уровня сервера, например, ua -для Украины, ru - для России, uk - для Великой Британиии и т.п. Но такие системы не учитывают большого количества ресурсов, размещенного региональными разработчиками на традиционно популярном домене com.
