Поисковые системы Интернет
Содержание
1 Поисковые системы Интернет 3
2 Краткий обзор поисковых указателей России 8
3 Краткий обзор зарубежных поисковых указателей 11
4 Приемы поиска информации 13
5 Основные программы для работы в Интернет 15
6 Средства работы с электронной почтой 20
7 Системы быстрого обмена сообщениями 22
Практическая часть 23
Список
использованной литературы 28
1 Поисковые системы Интернет
Поисковая система — программно-аппаратный комплекс с веб-интерфейсом, предоставляющий возможность поиска информации в Интернете. Под поисковой системой обычно подразумевается сайт, на котором размещён интерфейс (фронт-энд) системы. Программной частью поисковой системы является поисковая машина (поисковый движок) — комплекс программ, обеспечивающий функциональность поисковой системы и обычно являющийся коммерческой тайной компании-разработчика поисковой системы.
Большинство поисковых систем ищут информацию на сайтах Всемирной паутины, но существуют также системы, способные искать файлы на FTP-серверах, товары в интернет-магазинах, а также информацию в группах новостей Usenet.
Улучшение поиска — это одна из приоритетных задач современного Интернета (см. про основные проблемы в работе поисковых систем в статье Глубокая паутина).
Поисковые cистемы обычно состоят из трех компонент:
- агент (паук или кроулер), который перемещается по Сети и собирает информацию;
- база данных, которая содержит всю информацию, собираемую пауками;
- поисковый механизм, который люди используют как интерфейс для взаимодействия с базой данных.
Lycos. В Lycos используется следующий механизм индексации:
- слова в <title> заголовке имеют высший приоритет;
- слова в начале страницы;
- слова в ссылках;
- если в его базе индекса есть сайты, ссылка с которых указывает на индексируемый документ - релевантность этого документа возрастает.
Как и большинство систем, Lycos дает возможность применять простой запрос и более изощренный метод поиска. В простом запросе в качестве поискового критерия вводится предложение на естественном языке, после чего Lycos производит нормализацию запроса, удаляя из него так называемые stop-слова, и только после этого приступает к его выполнению. Почти сразу выдается информация о количестве документов на каждое слово, а позже и список ссылок на формально релевантные документы. В списке против каждого документа указывается его мера близости запросу, количество слов из запроса, попавших в документ, и оценочная мера близости, которая может быть больше или меньше формально вычисленной. Пока нельзя вводить логические операторы в строке вместе с терминами, но использовать логику через систему меню Lycos позволяет. Такая возможность применяется для построения расширенной формы запроса, предназначенной для искушенных пользователей, уже научившихся работать с этим механизмом. Таким образом, видно, что Lycos относится к системе с языком запросов типа "Like this", но намечается его расширение и на другие способы организации поисковых предписаний.
AltaVista. Индексирование в этой системе осуществляется при помощи робота. При этом робот имеет следующие приоритеты:
- слова содержащиеся в теге <title> имеют высший приоритет; ключевые фразы в <Meta> тэгах;
- ключевые фразы, находящиеся в начале странички;
- ключевые фразы в ALT – ссылках;
- ключевые фразы по количеству вхождений, присутствия слов, фраз.
Если тэгов на странице нет, использует первые 30 слов, которые индексирует и показывает вместо описания (tag description)
Наиболее интересная возможность AltaVista - это расширенный поиск. Здесь стоит сразу оговориться, что, в отличие от многих других систем AltaVista поддерживает одноместный оператор NOT. Кроме этого, имеется еще и оператор NEAR, который реализует возможность контекстного поиска, когда термины должны располагаться рядом в тексте документа. AltaVista разрешает поиск по ключевым фразам, при этом она имеет довольно большой фразеологический словарь. Кроме всего прочего, при поиске в AltaVista можно задать имя поля, где должно встретиться слово: гипертекстовая ссылка, applet, название образа, заголовок и ряд других полей. К сожалению, подробно процедура ранжирования в документации по системе не описана, но видно, что ранжирование применяется как при простом поиске, так и при расширенном запросе. Реально эту систему можно отнести к системе с расширенным булевым поиском.
Yahoo. Данная система появилась в Сети одной из первых, и сегодня Yahoo сотрудничает со многими производителями средств информационного поиска, а на различных ее серверах используется различное программное обеспечение. Язык Yahoo достаточно прост: все слова следует вводить через пробел, они соединяются связкой AND либо OR. При выдаче не указывается степень соответствия документа запросу, а только подчеркиваются слова из запроса, которые встретились в документе. При этом не производится нормализация лексики и не проводится анализ на "общие" слова. Хорошие результаты поиска получаются только тогда, когда пользователь знает, что в базе данных Yahoo информация есть наверняка. Ранжирование производится по числу терминов запроса в документе. Yahoo относится к классу простых традиционных систем с ограниченными возможностями поиска.
OpenText. Информационная система OpenText представляет собой самый коммерциализированный информационный продукт в Сети. Все описания больше похожи на рекламу, чем на информативное руководство по работе. Система позволяет провести поиск с использованием логических коннекторов, однако размер запроса ограничен тремя терминами или фразами. В данном случае речь идет о расширенном поиске. При выдаче результатов сообщается степень соответствия документа запросу и размер документа. Система позволяет также улучшить результаты поиска в стиле традиционного булевого поиска. OpenText можно было бы отнести к разряду традиционных информационно-поисковых систем, если бы не механизм ранжирования.
Infoseek. В этой системе индекс создает робот, но он индексирует не весь сайт, а только указанную страницу. При этом робот имеет такие приоритеты:
- слова в заголовке <title> имеют наивысший приоритет;
- слова в теге keywords, description и частота вхождений, повторений в самом тексте;
- при повторении одинаковых слов рядом выбрасывает из индекса;
- допускает до 1024 символов для тега keywords, 200 символов для тэга description;
- если тэги не использовались, индексирует первые 200 слов на странице и использует как описание.
Система Infoseek обладает довольно развитым информационно-поисковым языком, позволяющим не просто указывать, какие термины должны встречаться в документах, но и своеобразно взвешивать их. Достигается это при помощи специальных знаков "+" - термин обязан быть в документе, и "-" - термин должен отсутствовать в документе. Кроме этого, Infoseek позволяет проводить то, что называется контекстным поиском. Это значит, что используя специальную форму запроса, можно потребовать последовательной совместной встречаемости слов. Также можно указать, что некоторые слова должны совместно встречаться не только в одном документе, а даже в отдельном параграфе или заголовке. Имеется возможность указания ключевых фраз, представляющих собой единое целое, вплоть до порядка слов. Ранжирование при выдаче осуществляется по числу терминов запроса в документе, по числу фраз запроса за вычетом общих слов. Все эти факторы используются как вложенные процедуры. Подводя краткое резюме, можно сказать, что Infoseek относится к традиционным системам с элементом взвешивания терминов при поиске.
WAIS.
WAIS является одной из наиболее изощренных
поисковых систем Internet. В ней не реализованы
лишь поиск по нечетким множествам и вероятностный
поиск. В отличие от многих поисковых машин,
система позволяет строить не только вложенные
булевые запросы, считать формальную релевантность
по различным мерам близости, взвешивать
термины запроса и документа, но и осуществлять
коррекцию запроса по релевантности. Система
также позволяет использовать усечения
терминов, разбиение документов на поля
и ведение распределенных индексов. Не
случайно именно эта система была выбрана
в качестве основной поисковой машины
для реализации энциклопедии "Британика"
на Internet.
2 Краткий обзор поисковых указателей России
На
сегодняшний день самой популярной
русскоязычной поисковой
Ключевые слова в мета-тэгах и не особенно помогают достигать хороших позиций. Здесь стоит употреблять слова, которые встретятся в тексте страницы.
Однако мета-тэг, используется для выдачи описания страницы в результатах поиска. Это нужно учитывать при его составлении, так как, пользователь по этому описанию принимает решение посетить вас, или нет. Мета-тэги и не поддерживаются. Важно разместить ключевые слова в тэге "title", заголовках (h1-h6), содержании страницы, "ALT"-тэгах.
Для
определения релевантности
Следующая по популярности поисковая система в Рунете - Рамблер (http://www.rambler.ru). По оценкам SpyLog Рамблер обрабатывает около 20% всех поисковых запросов Рунета. На Рамблере реализована умная система, которая позволяет выдавать в результатах поиска слова, которые являются синонимами запроса. Еще одной функцией этой умной системы является выдача контекстной рекламы не только по конкретным ключевым словам, но и по фразам, которые тесно связаны с ними.
Рамблер (в отличие от других поисковиков) умеет извлекать гиперссылки из объектов Macromedia Flash. Если сайт имеет заставку или навигационные панели, выполненные c использованием этой технологии, Рамблер обработает их, найдет адреса всех страниц сайта и проиндексирует весь сайт. Однако, сами тексты flash-объектов не индексируются. Для сайтов, которые целиком состоят из flash-объектов, рекомендуется создать HTML-копию и зарегистрировать ее в поисковой машине. Роботы Рамблера игнорируют мета-тэги, кроме. Комментарии в документе роботы Рамблера тоже не сканируют.
Роботы Рамблера также справляются с конструкциями фреймов. Максимальный размер документа для роботов составляет 200 килобайт. Документы большего размера усекаются до указанной величины.
Следующая по популярности – поисковая машина Апорт (http://www.aport.ru/). Эта страница доступна почти с любой страницы Апорта, например, с главной страницы Апорта. Добавлять в поисковую систему Апорт следует русскоязычные сайты, а также сайты имеющие непосредственное отношение к российскому Интернету.
С момента добавления сайта в Апорт до момента его появления в поисковой базе проходит от двух-трех дней до двух недель.
Ключевые слова не имеют определяющего значения при определении релевантности документа. Но разумное использование этого тэга рекомендуется.
В отличие от многих других поисковых систем, Апорт не применяет каких-либо специальных санкций к сайтам, пытающимся обмануть поисковую систему с помощью спама, однако добиться подобным способом желаемого результата не получится. Поэтому не стоит писать невидимые тексты, вбивать сотни ключевых слов, не имеющих никакого отношения к содержанию документа и т.д.
Вот перечень основных критериев, которые Апорт учитывает при сортировке сайтов: густота ключевых слов, расстояние между ключевыми словами в тексте документа, место, где встречаются поисковые слова (заголовок, описание, мета-тэг и т.п.), внешний вид шрифта, которым набраны ключевые слова (размер, жирность, цвет), количество ссылок из Интернета на данный документ, использование ключевого слова в тексте ссылок из Интернета на данный документ. Окончательный процент соответствия документа запросу строится как некая функция от всех этих показателей.
Конечно нельзя оставить без внимания Google.ru. Несмотря на то, что Google все еще отстает от русских поисковых машин по количеству пользователей, он становится все более и более популярным. Некоторые опросы общественного мнения указывают на 3-9% поискового трафика в Рунете, но большинство аналитиков полагают, что его доля в поиске русских сайтов составляет не менее 10%. Google применяет общие правила индексирования к любому web-содержанию, независимо от того принадлежит ли доменное имя к Рунету или нет. Это является большим преимуществом перед русскими конкурентами, которые не так дружелюбны с web-сайтами с доменным именем типа 'yoursite.com', 'yoursite.org', и т.д. и требуют от них подавать заявки на включение по электронной почте. Однако, скорее всего Google не будет иметь существенных претензий на лидерство в Рунете, пока не усовершенствует свой алгоритм на основе морфологии русского языка.
Мы
охарактеризовали далеко не все поисковики
Рунета, а только самые главные
из них.
3 Краткий обзор зарубежных поисковых указателей
За рубежом поисковых указателей гораздо больше. Если брать только крупнейшие, то можно насчитать около двух десятков. Мы в нашем обзоре остановимся на трех.
Наиболее популярной (кстати, совершенно
незаслуженно, как мы покажем
далее) считается поисковая
Самой мощной в мире сегодня является поисковая система Fast Search (www.alltheweb.com). О ней мало кто знает, потому что она была открыта сравнительно недавно (летом 1999 года). Создатели системы поставили перед ней глобальную цель — создать самый крупный и самый быстрый указатель в мире. Эта цель была достигнута в считанные месяцы. Система первой взяла 300-миллионный рубеж всего через четыре месяца после начала работы, а в 2000 г. приблизилась к отметке 600 миллионов Web-страниц. При этом скорость поиска системы составляет доли секунды и нет никакой рекламы.
Из множества прочих мы
Имеется в системе и небольшой
коммерческий раздел Special Collections.
Его материалы поставляются за деньги.
Впрочем, коммерческий раздел невелик
и совершенно не портит систему. По-видимому,
он рассчитан на журналистов, которым
могут срочно потребоваться справки по
«горячим» темам.
4 Приемы поиска информации
Рассказывать о том, как
Значительно интереснее
Четыре вида поиска
Все
поисковые указатели реализуют
несколько алгоритмов поиска. К ним
относятся: простой поиск, расширенный
поиск, контекстный поиск и
Простой поиск. При простом поиске в поле запроса вводится одно или несколько слов, которые могут характеризовать содержание документа. Если это слово одно, то, как правило, в ответ выдается такое большое количество ссылок, с которым непонятно что делать. Если вводится несколько слов, то результат зависит от того, как эти слова введены, а это, в свою очередь, зависит от конкретной используемой системы. Приемы простого поиска в разных поисковых системах, как правило, свои, и прежде чем ими пользоваться, желательно почитать инструкцию.
Расширенный поиск. Расширенный поиск всегда подразумевает запрос из группы слов. При расширенном поиске в большинстве случаев разрешается связывать ключевые слова логическими операторами AND (И), OR (ИЛИ), NOT (HE) и другими. Основное достоинство расширенного поиска состоит в том, что как правила записи ключевых слов и логических операторов в разных системах либо одинаковы, либо очень похожи. Поэтому, усвоив один раз приемы расширенного поиска, можно ими пользоваться где угодно. Надо только предварительно переключить систему в нужный режим.
Контекстный поиск. Это очень полезный вид поиска, который, к сожалению, реализован не во всех поисковых указателях. Системы, которые его поддерживают, следует ценить особо. При контекстном поиске требуется точное совпадение фразы или группы слов, например «Все смешалось в доме Облонских». В большинстве поисковых систем, включающих этот метод, ключевая фраза должна быть заключена в кавычки: "Все смешалось в доме Облонских".
Специальный
поиск. С помощью команд специального
поиска разыскивают дополнительную информацию.
Например, такие команды позволяют определить,
как часто в Сети встречаются гиперссылки,
указывающие на какой-либо ресурс, с их
помощью можно найти ключевые слова, входящие
в заголовки Web-страниц и т. п. Как правило,
команды специального поиска в различных
поисковых системах свои.
5 Основные программы для работы в Интернет
Для
успешной и удобной работы в сети
Интернет необходимо не только знать,
«что такое Интернет, и с чем
его едят», но и иметь под рукой
хорошее программное
Итак, для работы нам потребуются:
Браузер – программа для
Почтовый клиент – программа для работы с почтой.
Download-клиент – программа для закачек файлов.
ICQ, SKYPEи т.п. прграммы для общения.
Браузеры
Браузер как таковой, является основной программой для работы в Интернете Но мы просто посмотрим на самые популярные браузеры под Windows.
Поскольку Iinternet Explorer (IE) поставляется вместе с Windows, он волей неволей становится первым браузером для множества пользователей. С подавляющим перевесом этот браузер держит первенство среди корпоративных клиентов, работающих под Windows – компании не нужно тратиться на покупку ПО сторонних компаний. Но он, к сожалению, не так хорош, чтобы оправдать такую статистику.
Новый Internet Explorer9 претерпел значительные перемены как внутри, так и снаружи. В программе реализован полностью новый интерфейс, добавлена поддержка всех востребованных веб-стандартов, повышена производительность. Разработчики приложили большие усилия, чтобы поправить давно расшатавшуюся репутацию программы и выпустить не новую версию старого продукта, а новый браузер, который должен быть избавлен от всех основных недочетов прошлого. В Intenet Explorer 9 в значительной степени повышена скорость работы. В основном, благодаря тому, что рендеринг всего содержания осуществляется благодаря аппаратному ускорению средствами видеокарты и различными подсистемами DirectX, что обеспечивает значительный прирост в скорости отрисовки веб-страниц. Также улучшены механизмы обработки разнообразного содержания, включен новый JavaScript-движок и улучшена система кэширования.
Опера, вероятно, самый популярный браузер в РуНете. Программа снискала это звание многим: очень высокой скоростью загрузки страничек, малым расходом трафика, необычным, но очень удобным интерфейсом. И не в последнюю очередь – бесплатным статусом.
Изначально Opera– более функциональный клиент, чем IE и Mozilla FireFox. Последние версии Оперы всё больше напоминают «универсальный комбайн для работы в интернете» – появились встроенные клиент закачек, почтовый клиент, RSS-ридер, IRC-клиент. Конечно, встроенные программы не заменят полнофункциональных, но с их помощью вполне можно совершать базовые операции.
Mozilla FireFox – браузерсочетающий в себе обширные возможности расширения функционала (как и всё программы Mozilla) с простотой и удобством интерфейса. Впрочем, даже в базовом виде Огненный Лис намного функциональнее IE 6. К тому же практически любую дополнительную функцию возможно реализовать с помощью расширений. Вид программы полностью настраивается и разнообразится с помощью скинов.
Браузер абсолютно неуязвим, так
как большинство открытых
Главные преимущества
Google Chrome — это бесплатный веб-браузер разработанный поисковой системой Google.Он использует компоненты другого программного обеспечения с открытым кодом (включая WebKit и Mozilla) и предоставляет большую стабильность, скорость и безопасность, чем другие существующие на сегодня браузеры. При этом Google Chrome обладает простым и эффективным интерфейсом пользователя.
Концепция Chrome ориентирована на достижение высокой скорости при выполнении любых операций: быстрый запуск с рабочего стола, моментальная загрузка веб-страниц и сложных веб-приложений.
Простота. Браузер Chrome имеет простой и рациональный интерфейс.
Кроме того, Chrome предоставляет возможности для повышения эффективности и удобства использования. Например, можно выполнять поиск и навигацию в одном поле ввода, а также быстро и легко размещать вкладки в нужном порядке.
Безопасность. Chrome разрабатывался с целью повышения безопасности при работе в Интернете, что достигается за счет встроенной функции защиты от фишинга и вредоносного программного обеспечения, функции автоматического обновления, которая гарантирует своевременную установку обновлений безопасности, а также благодаря многим другим функциям.
И
другие возможности. Chrome включает множество
полезных функций, в том числе расширения,
функция перевода в браузере, темы и многое
другое. Подробнее о последних и самых
популярных функциях Chrome.
Почтовые клиенты
Почтовые клиенты это программы для чтения электронной почты на локальном компьютере. Существует большое количество платных и бесплатных программ для чтения электронной почты email на локальном компьютере. Программа – клиент подключается к почтовому серверу и скачивает все необходимые письма на локальный компьютер, где далее почтовая программа позволяет делать с полученной почтой все что угодно – читать, удалять, отвечать, каталогизировать, сортировать письма, и многое другое.
Download-клиенты
ReGet Junior- это менеджер для быстрой скачки файлов с HTTP- и FTP-серверов с возможностью докачки при обрыве связи. Программа не требует никаких сложных настроек, что делает ее очень удобной для неподготовленных пользователей. Закачка файлов осуществляется в несколько потоков, что значительно ускоряет время скачки. При желании ReGet Junior может быть легко и быстро интегрирован в Internet Explorer, Netscape Navigator, Opera.
FlashGet - это улучшенная версия известной программы JetCar. В настоящий момент программа является одной из лучших программ для закачки файлов из Интернета. При скачивании программа осуществляет разделение файлов на части и закачивает каждую часть отдельно, что значительно увеличивает скорость закачки файлов.
Picture Pump- это уникальная программа для закачки графических картинок с сайтов. Быстро скачивает картинки и автоматически повторяет скачивание файлов при неполной докачке. Отфильтровывает ненужные файлы, например, баннеры. Программа имеет русский и английский интерфейсы, не требует инсталляции и поддерживает работу через прокси-сервер.
ДИСКо Качалка 3.3– это программа фирмы ДИСКо для считывания (скачивания) из Интернета целой группы страниц, сайтов, ссылающихся друг на друга. По окончании работы Вы будете иметь “зеркало” скаченного сайта на своем диске и сможете просматривать его своим браузером после отключения от Интернета.От других программ такого типа ДИСКо Качалка отличается в первую очередь ориентированностью на русский язык. Например, если среди полученных страниц есть страницы с разной кодировкой, ДИСКо Качалка автоматически выберет правильную кодировку для отображения заголовка страницы. При наличии на сервере меню по кодировкам ДИСКо Качалка будет считывать только страницы с указанной Вами кодировкой.