Цикл презентаций, посвященный компьютерным коммуникациям: Компьютерные сети (Компьютерные сети, их преимущества, Топология сетей, Характеристики сетей, Сетевое оборудование, Установка сети) Интернет. Протоколы и адресация (Интернет, адресация в Интернет, протоколы Интернет) Сервисы Интернет (Сервисы Интернет: www, E – mail, UseNet, FTP, IRC, IP – телефония …) Как работают поисковые системы (Поиск информации, поисковые системы и как они работают, запросы, сравнение и характеристики поисковых систем) Электронная почта. Создание и размещение сайта (E – mail, почтовые протоколы, почтовые серверы, создание и использование почтового ящика, создание и размещение сайта на бесплатных хостингах) Тест по компьютерным коммуникациям (Заключительный тест по компьютерным коммуникациям и Интернет)

@ Тутынин С.В.

1. Поиск информации. Поисковые системы и как они работают 2. Сравнение и характеристики поисковых систем 3. Запросы в поисковых системах ВОПРОСЫ:

Поиск информации. Поисковые системы и как они работают ВОПРОС 1

Поисковые системы и как они работают Поиск информации в Интернет – сложная задача. Нахождение среди сотен миллионов Web – страниц нужной информации аналогично нахождению иголки в стоге сена. К счастью для пользователей существуют поисковые системы, которые облегчают наш поиск, многократно экономя наше время и средства Рассмотрим, что такое поисковые системы и как они работают Обычно поисковая служба это компания, имеющая свой сервер, на котором работает некая поисковая система. Умение пользоваться ими, собственно говоря, и составляет умение пользоваться Интернетом. Все поисковые системы WWW основаны на гиперссылках. Обращаясь к поисковой службе, мы формулируем запрос, в котором формально описываем то, что хотим найти

Поисковые системы и как они работают Как работает поисковая система Работу поисковой системы можно разделить на 3 основных этапа: 1 этап: Создание специальной программы (поискового робота), способной путешествовать по Интернет, просматривать Web – страницы и копировать их на сервер поисковой системы Такие программы (пауки) день и ночь без устали «обшаривают» Интернет, переходя по всем гиперссылкам, имеющимся на страницах, заходя во все удаленные закоулки всемирной паутины В результате деятельности поисковых роботов на сервере поисковой системы накапливаются образы миллионов страниц Интернет

Поисковые системы и как они работают 2 этап: Информацию, которая собрана поисковым роботом, сложно использовать в таком неупорядоченном виде Поэтому ее необходимо упорядочить (структурировать), сохранить в виде базы данных, по которой можно очень быстро ее найти по запросу пользователя Этот процесс называется индексацией, а получившаяся база данных – поисковым указателем (индексом) На этом этапе также происходит Нормализация слов (отбрасывание у них суффиксов и окончаний) Отбрасывание зарезервированных слов Что дает нормализация и отбрасывание зарезервированных слов?

Поисковые системы и как они работают 3 этап: На этом этапе поисковая система должна принять запрос пользователя, быстро найти и отправить ему нужную информацию Система анализирует ключевые слова, введенные в запросе пользователя, нормализуя их и отбрасывая зарезервированные слова, затем выполняет поиск совпадений с содержимым поисковых индексов (своих баз) Наконец, система формирует выходной список ссылок по запросу Очень часто по запросу находятся тысячи ссылок на страницы Интернет (далее мы рассмотрим, как их уменьшить), поэтому встает вопрос упорядочения ссылок по определенным критериям (рейтинг). Обычно на первые места поисковые системы ставят сайты по таким условиям (положительный рейтинг): если разыскиваемые слова встречаются на Web-странице неоднократно если они расположены близко к началу страницы или присутствуют в ее заголовке; если Web-страница имеет иллюстрацию, альтернативный текст которой тоже содержит слова, введенные пользователем.

Поисковые системы и как они работают Поисковые системы по способу формирования данных можно разделить на две основных группы: Поисковые каталоги Поисковые указатели (индексы) Поисковые каталоги похожи на предметные каталоги больших библиотек. Данные, которые заносятся в каталог, проходят «ручную обработку» К примеру на Yahoo! работают до 150 редакторов (человек), ежедневно просматривающих Web- пространство в поисках наиболее ценных ресурсов по темам, вызывающим общественный интерес Принцип действия поискового указателя похож на принцип действия предметного каталога библиотеки. Пользователь формирует запрос с помощью ключевых слов, выражающих объект его поиска, а поисковая система выдает ему список ссылок на Web- страницы, содержащие данные ключевые слова. Основное отличие поисковых указателей от поисковых каталогов состоит в полной автоматизации всех этапов работы. Здесь отсутствует «человеческий фактор», и потому количество Web-страниц, к которым ведет поисковый указатель, намного больше.

Поисковые системы и как они работают Сравнение поисковых каталогов и указателей Сравнивая почтовые каталоги и указатели, можно сказать, что особенно значимым является здесь человеческий фактор Поисковые каталоги формируются вручную с помощью живых людей (имеющих отличные знания в различных областях), поэтому качество ресурсов несравненно выше, чем в указателях. В то же время количество ресурсов в каталогах значительно меньше, чем в указателях (лучше меньше, но лучше) Одним из крупнейших поисковых каталогов является Yahoo (yahoo. com) Поисковые указатели черпают свою исходную информацию от поисковых роботов, день и ночь ползающих по просторам WWW. Процесс сбора информации полностью автоматизирован, поэтому объем проиндексированного пространства намного больше, чем у поисковых каталогов (~ 25 % всего Интернет) Главный недостаток указателей в том, что почтовый робот не может оценить значимость ресурса (как это может сделать опытный редактор), поэтому многие ссылки оказываются «не в тему» запроса

Поисковые системы и как они работают Параметры оценки качества поисковых систем 1. Коэффициент попадания (k поп ) Показывает, какой процент ссылок, выданных поисковой системой, действительно относится к теме запроса Для каталогов он высокий – %, для указателей очень низкий – единицы процентов (снижает его и неоптимальный запрос пользователя) 2. Коэффициент охвата (k охв ) Показывает, насколько база данных поисковой системы охватывает истинное количество информации, находящейся в сети Для указателей он доходит до 25 %, у каталогов – всего лишь около 1 % Пользователь желает, чтобы каждый из коэффициентов был близок к 100%. Его субъективная оценка качества поисковой системы напоминает произведение коэффициента попадания на коэффициент охвата. Сегодня же и для поисковых каталогов, и для поисковых указателей это произведение составляет десятые доли процента.

Поисковые системы и как они работают Стремление повысить качество поисковых систем привело к объединению в одной системе каталогов и указателей – созданию гибридных систем (многие системы, например yandex.ru) Еще один тип составляют метапоисковые системы. Они принимают от пользователя запрос и размещают его сразу на нескольких поисковых серверах. Потом они собирают поступившую от них информацию, обобщают ее, структурируют, рафинируют (очищают) и передают клиенту. Увеличенное время исполнения запроса компенсируется улучшенным качеством результатов поиска. Борясь за клиентов, многие поисковые системы превращаются в порталы Опыт показывает, что очень удобно иметь в качестве начальной страницы такую, на которой уже представлено несколько ссылок на основные поисковые системы. Удобно здесь же иметь доступ к электронной почте. Неплохо, если на этой странице всегда отображаются последние новости из мира политики, искусства, спорта, бизнеса и т. п. Такие «готовые» начальные страницы называются порталами

Поисковые системы и как они работают Рейтинговые службы В последние годы появился новый тип служб, позволяющих быстро разыскивать информацию в Сети это так называемые рейтинговые службы. Они занимают промежуточное положение между поисковыми службами и порталами и могут использоваться как в том, так и в другом качестве. Суть рейтинговой службы состоит в том, что на ее сервере создаются тематические списки ссылок на наиболее популярные Web-ресурсы. Хоть эти списки и небольшие, представительность их велика, поскольку именно эти ссылки предпочитают большинство клиентов Сети. Самая популярная отечественная рейтинговая служба - Rambler (

Сравнение и характеристики поисковых систем ВОПРОС 2

Сравнение и характеристики поисковых систем ПОПУЛЯРНЫЕ ПОИСКОВЫЕ СИСТЕМЫ Обзор поисковых систем Русские Зарубежные Я ндекс ( Апорт ( Rambler ( Ау! ( AltaVista ( Excite ( HotBot ( Yahoo! (

Сравнение и характеристики поисковых систем Поисковая система Яндекс (yandex.ru) Яндекс - мощная поисковая служба, основанная на указателе, обладающая как большой и представительной базой данных по отечественным Web-ресурсам (свыше 800 млн. страниц), так и изощренной системой индексации. Функционирование службы обеспечивает компания CompTek ( Для тех, кто предпочитает подходить к поиску творчески и стремится развивать свое мастерство, Yandех предоставляет уникальные в своем роде инструменты, сосредоточенные в разделе расширенного поиска Кроме поиска, Яндекс предоставляет ряд дополнительных сервисов (новости, погода, систему Яндекс – деньги, бесплатный хостинг для размещения Ваших сайтов – narod.ru, электронную почту …) и является по сути крупнейшим Российским мега порталом Яндекс - мощная поисковая служба, основанная на указателе, обладающая как большой и представительной базой данных по отечественным Web-ресурсам (свыше 800 млн. страниц), так и изощренной системой индексации. Функционирование службы обеспечивает компания CompTek ( Для тех, кто предпочитает подходить к поиску творчески и стремится развивать свое мастерство, Yandех предоставляет уникальные в своем роде инструменты, сосредоточенные в разделе расширенного поиска Кроме поиска, Яндекс предоставляет ряд дополнительных сервисов (новости, погода, систему Яндекс – деньги, бесплатный хостинг для размещения Ваших сайтов – narod.ru, электронную почту …) и является по сути крупнейшим Российским мега порталом

Сравнение и характеристики поисковых систем Поисковая система Апорт ( « Апорт» один из первых поисковых указателей российского Интернета детище компании « Агама » ( Выше мы уже отмечали, что сегодня владение самым большим проиндексированным пространством Web уже не является самоцелью. Главное наилучшим образом обеспечить потребности пользователя, и простейший путь к этому лежит не в безмерном увеличении индекса, а в применении новых технологий при обработке результатов. Прежде всего следует отметить, что системе «Апорт» удается мастерски сочетать «машинный» и «человеческий» факторы Хотя пользователь и не видит глубинных процессов, но система «Апорт » уделяет особое внимание рейтингованию результатов поиска. В частности, она использует наиболее эффективную сегодня систему рейтингования по количеству ссылок, ведущих к данному ресурсу (по индексу цитирования). По способу представления результатов поиска служба «Апорт " в настоящее время является одной из самых передовых не только в России, но и в мире « Апорт» один из первых поисковых указателей российского Интернета детище компании « Агама » ( Выше мы уже отмечали, что сегодня владение самым большим проиндексированным пространством Web уже не является самоцелью. Главное наилучшим образом обеспечить потребности пользователя, и простейший путь к этому лежит не в безмерном увеличении индекса, а в применении новых технологий при обработке результатов. Прежде всего следует отметить, что системе «Апорт» удается мастерски сочетать «машинный» и «человеческий» факторы Хотя пользователь и не видит глубинных процессов, но система «Апорт » уделяет особое внимание рейтингованию результатов поиска. В частности, она использует наиболее эффективную сегодня систему рейтингования по количеству ссылок, ведущих к данному ресурсу (по индексу цитирования). По способу представления результатов поиска служба «Апорт " в настоящее время является одной из самых передовых не только в России, но и в мире

Сравнение и характеристики поисковых систем Поисковая система Рамблер ( Rambler это рейтинговая система, обладающая всеми основными функциями поисковых указателей. Как поисковый указатель, служба обладает одним из крупнейших индексов в России Основную популярность служба приобрела в первую очередь как рейтинговая система. Она позволяет быстро выявить круг Web-узлов, поставляющих информацию на заданную тему и оценить их популярность по количеству посещений за последние сутки. Мы уже говорили о том, что эта характеристика качественности Web-ресурса является относительной, но в тех случаях, когда речь идет о теме, имеющей общественный интерес, ей можно доверять. Rambler это рейтинговая система, обладающая всеми основными функциями поисковых указателей. Как поисковый указатель, служба обладает одним из крупнейших индексов в России Основную популярность служба приобрела в первую очередь как рейтинговая система. Она позволяет быстро выявить круг Web-узлов, поставляющих информацию на заданную тему и оценить их популярность по количеству посещений за последние сутки. Мы уже говорили о том, что эта характеристика качественности Web-ресурса является относительной, но в тех случаях, когда речь идет о теме, имеющей общественный интерес, ей можно доверять.

Запросы в поисковых системах ВОПРОС 3

Запросы в поисковых системах Каждая поисковая система предоставляет свои методы поиска и имеет свои особенности в правилах записи комбинации ключевых слов. Однако есть общие элементы, одинаково справедливые для большинства поисковых систем. Некоторые правила создания поисковых запросов 1. Прежде всего выясните, каковы правила поиска в той поисковой системе, в которой вы находитесь (обычно в каждой системе есть справочный раздел, где можно узнать особенности поиска системой) 2. Для получения точных результатов по запросу формулируйте его как можно точнее (например поиск по фразе «президент Путин» даст нам тысячи страниц совершенно разной тематики, то есть не даст ничего)

Запросы в поисковых системах 4. Если вы хотите найти точную цитату, просто задайте искомую фразу в кавычках: «Однажды, в студеную, зимнюю пору". По такому запросу будут найдены все страницы, в которых есть нужная вам цитата. 3. Многие системы ищут не только фразу целиком, но и отдельные слова, входящие в данную фразу ( Например, если вы хотите найти информацию о компьютерных играх (computer games), то кажется, что так и надо оформить запрос: computer games Увы, для большинства поисковых систем этот запрос будет ошибочным. При таком запросе система будет искать все Web-страницы, в которых встречается либо слово computer, либо слово games, либо оба вместе. В WWW полно страниц, на которых упоминаются компьютеры и нет ни слова про игры. Точно так же там полно страниц со спортивными, настольными и другими играми, которые нам не интересны. 3. Многие системы ищут не только фразу целиком, но и отдельные слова, входящие в данную фразу ( Например, если вы хотите найти информацию о компьютерных играх (computer games), то кажется, что так и надо оформить запрос: computer games Увы, для большинства поисковых систем этот запрос будет ошибочным. При таком запросе система будет искать все Web-страницы, в которых встречается либо слово computer, либо слово games, либо оба вместе. В WWW полно страниц, на которых упоминаются компьютеры и нет ни слова про игры. Точно так же там полно страниц со спортивными, настольными и другими играми, которые нам не интересны.

Запросы в поисковых системах 5. При создании запроса вы можете использовать знаки + и – для добавления или исключения слов. Если нам надо, чтобы поисковая система нашла страницы, на которых одновременно присутствуют все использованные ключевые слова, то перед каждым из них надо поставить знак «+» Например: по запросу «+Клинтон +скандал» будут найдены все страницы, на которых присутствуют оба слова Используя знак «+», мы сужаем круг поиска и уменьшаем количество возможных ссылок. Для сужения поиска можно использовать и знак минус, ставя его перед ненужным словом Например: по запросу «+Клинтон+скандал-Левински» будут найдены все страницы, на которых с большой вероятностью будет информация о скандалах, связанная с Клинтоном, но не будет информации о скандале с Моникой Левински 5. При создании запроса вы можете использовать знаки + и – для добавления или исключения слов. Если нам надо, чтобы поисковая система нашла страницы, на которых одновременно присутствуют все использованные ключевые слова, то перед каждым из них надо поставить знак «+» Например: по запросу «+Клинтон +скандал» будут найдены все страницы, на которых присутствуют оба слова Используя знак «+», мы сужаем круг поиска и уменьшаем количество возможных ссылок. Для сужения поиска можно использовать и знак минус, ставя его перед ненужным словом Например: по запросу «+Клинтон+скандал-Левински» будут найдены все страницы, на которых с большой вероятностью будет информация о скандалах, связанная с Клинтоном, но не будет информации о скандале с Моникой Левински

Запросы в поисковых системах 6. Значительно точнее будет поиск, если в запросе использовать поиск по заголовкам страниц В Яндексе для поиска по заголовку вводят запрос, поставив перед ним $title (например: $title(кодирование графики) найдет только страницы с указанным заголовком, которых будет очень мало, но практически все они будут соответствовать запросу ) 6. Значительно точнее будет поиск, если в запросе использовать поиск по заголовкам страниц В Яндексе для поиска по заголовку вводят запрос, поставив перед ним $title (например: $title(кодирование графики) найдет только страницы с указанным заголовком, которых будет очень мало, но практически все они будут соответствовать запросу ) 7. Для более точного поиска служит расширенный поиск, информацию о котором Вы найдете в разделе «Помощь» каждой поисковой системы (Использование логических функций, вложенные запросы, поиск сайтов, URL и прочее) 7. Для более точного поиска служит расширенный поиск, информацию о котором Вы найдете в разделе «Помощь» каждой поисковой системы (Использование логических функций, вложенные запросы, поиск сайтов, URL и прочее)

Тутынин С.В год.