Разные поисковые системы. Как работает поисковая система

Современные поисковые системы - это сложные обучаемые роботы, содержащие огромную базу знаний, которые способны за доли секунды найти точные ответы на самые разные запросы пользователей. Google, например, ежедневно обрабатывает свыше 3 миллиардов запросов, или не менее 1 триллиона запросов в год. Но таким поиск был не всегда. Первые поисковые системы хотя и решали аналогичную задачу - поиск в интернете - но были мало чем похожи на современные. Так кто же был первопроходцем, и как развивался поиск?

Немного истории

Принято считать, что создание поисковых систем началось в 1990-х годах. С этим можно поспорить. Еще в 1945 году инженер из США Vannevar Bush (Вэнúвар Буш) опубликовал исследование на тему «Как мы можем мыслить». В нем формулировалась идея гипертекста. Он же семью годами ранее запатентовал устройство, способное быстро находить сведения на микрофильмах. Это был прототип современных поисковиков.

В Корнельском университете в 1960-х годах под руководством Джерарда Сэлтона была создана SMART (Salton’s Magic Automatic Retriever of Text) - система, способная работать с информацией. В дословном переводе название звучит очень претенциозно - «Волшебный автоматический обработчик текста Сэлтона». А, может быть, и не очень, потому что современные поисковые алгоритмы основываются на принципах SMART.

Первый в современном понимании поисковик Archie был разработан в 1990 году студентом Университета имени Мак Гилла (Монреаль, Канада) Аланом Эмтэйджем. Программа не индексировала файлы из публичных FTP-серверов, но собирала их в общую базу данных. Сейчас Archie безнадежно устарел и уже не используется.

После Archie были:

• Gopher (1991) - сетевой протокол поиска документов. Выполнял индексацию текстов. Вытеснен HTTP.
• Veronica - искала файлы по ключевому слову в названии. Была не самостоятельной программой, так как работала с архивом Gopher.
• Jughead - аналог предыдущей системы, но с добавлением логических элементов поиска.
• World Wide Web Wanderer (1993) - первый робот, индексирующий веб-страницы. Его база сайтов называлась Wandex.
• ALIWEB (Archie Like Indexing for the WEB) (1993) - первая система, созданная специально для поиска файлов. Нередко таковой считают появившуюся на несколько месяцев позже WebCrawler (1994).

В 1993-1994 годах крупные бизнесмены поняли, что интернет сулит хорошие перспективы в плане получения прибыли. С тех пор в создание поисковых систем стали вкладываться большие деньги.

Языковый вопрос или нюансы популярности

Популярность поисковой системы зависит от лингвистических особенностей региона. Так, например, если брать мир в целом, то, по данным NetMarketShare за май 2014 года, квартет лидеров выглядел следующим образом:

На русскоязычных просторах несколько иная картина поискового рынка (LiveInternet, май 2014 г.):

В Азии популярны другие сервисы. В Китае Baidu.com настолько оторвался от конкурентов (по разным сведениям, его доля рынка составляет от 65% до 80%), что на эту систему ориентируются все SEO-фирмы страны. So.com интересен тем, что, стартовав в 2012 году, всего за пару с лишним лет успел захватить 17%. Фирму обвиняют в не слишком честной игре, но кто на это обращает внимание. Sogou.com (10%) быстро вышел на третье место благодаря продуктам Sohu, среди которых «умная» программа ввода иероглифов. Правда, его покупает фирма Qihoo, которая владеет So.com. На четвертом месте Soso.com (3,5%), работавший до 2009 года по технологии Google.

Подобное можно сказать и о других странах региона. Две трети южнокорейцев предпочитают Naver собственного производства. В Японии чаще всего грузят Yahoo! Japan и так далее.

Первая шеренга

Статья о поисковых системах будет неполной, если не сказать хотя бы пару слов о лидерах.

1. Google . Домен зарегистрирован 15.09.1997 года. Индексирует свыше 25 млрд страниц. Начиная с 2005 года, сталкивается с проблемами в области защиты прав человека из-за претензий по картографии, получения персональных данных, сканирования Wi-Fi и применения «очков Google».
2. Яндекс . Анонсирована 23.09.1997 года. С 2000 года выделилась из CompTek International в отдельную компанию. Во время первичного размещения акций было заработано больше средств, чем любой другой интернет-фирмой. Поиск отличается высокой степенью релевантности.
3. Baidu . Год основания - 2000. Имеет собственную онлайн-энциклопедию. А еще - жесткую проправительственную цензуру. Сайты, расположенные на иностранных серверах, индексирует на порядок хуже, чем на китайских.
4. Bing . Работает под разными названиями с 1998 года. Разработана специалистами Microsoft. Результаты поиска выдаются на одной странице, для каждого найденного сайта можно скорректировать объем отображаемой информации.
5. Yahoo! Создана в 1995 году. Ее электронная почта Yahoo! Mail одна из самых распространенных в мире. Надежды на будущее связаны с усовершенствованием Yahoo!Next. С помощью этого поисковика правительство Китая определяет место жительства диссидентов.
6. AOL . Поисковая система медийной корпорации из США AOL inc. Владеет самым большим каталогом ссылок на веб-ресурсы Open Directory Project, а также работающей в сфере IT-индустрии корпорацией Netscape.

Оптимизация и продвижение сайта имеет свои особенности в зависимости от поисковой системы, так как у каждого поисковика есть свои уникальные технологии и алгоритмы поиска.

Дальнейшее развитие поисковых систем предполагает их совершенствование и развитие в сфере мобильного поиска , еще большей персонализации выдачи и повышения качества, правдивости и уникальности контента.

Еще совсем недавно эрудиция была в большой цене. Но сегодня знание всех мировых столиц и мельчайших исторических подробностей является абсолютно бесполезным. Вместо того чтобы пичкать свой мозг никому не нужными фактами, достаточно лишь знать, какие есть поисковики в интернете. Все остальное решит умнейший программный алгоритм.

Краткое описание поисковых систем

Поисковая система - это программная система, которая предназначена для поиска информации во Всемирной Паутине. Результаты запроса, как правило, представлены в виде страницы выдачи, состоящей из десятка коротких текстовых блоков (сниппетов) в сочетании с мультимедийным контентом.

Сегодня насчитывается около полутора десятка международных инструментов поиска данных. Все они действуют по одним и тем же принципам:

1. За сбор информации отвечает краулер - робот (проще - специальная программа), который «ползает» с сайта на сайт и заносит в индекс различные типы данных (содержание страницы, программные сценарии, мета-теги и др.);
2. После добавления в индекс, информация становится доступной для рядового пользователя через интерфейс поисковой строки;
3. Выдача на странице результатов ранжируется особым образом. Ключевым показателем является релевантность - соответствие первоначальному запросу.

Как пользоваться поисковиком?

Разработчики этих систем сделали все возможное, чтобы работать с ними мог каждый, даже ребенок. И, нужно сказать, им это удалось:

1. Для того чтобы обратиться к разуму поисковой машины, достаточно перейти на ее официальный сайт. Дизайн стартовых страниц может отличаться, но строка для ввода текста обязательно будет на самом видном месте;
2. Еще более простой способ - задание запроса через адресную строку браузера. Большинство современных обозревателей поддерживают данную функцию;
3. Если набор текста в конкретной ситуации затруднен или невозможен, можно воспользоваться функцией голосового ввода (запускается по нажатию иконки с микрофоном);
4. Спустя доли секунды после обращения система выдаст результаты;
5. Для ускорения поиска можно использовать логические операторы. Так, добавление знака «минус» перед словом исключит его из выдачи, знака «плюс» - сообщит поисковой машине, что данное слово обязательно должно быть в искомом тексте, а словосочетание в кавычках запускает поиск по точной фразе;
6. Если найти нужную информацию не удалось - не беда. Никто не мешает воспользоваться другой службой. Приведем обзор главных игроков на этом рынке.

Обзор ключевых сервисов

На рубеже веков практически каждое государстве имело свой национальный поисковик. Однако по прошествии нескольких лет конкуренция оставила лишь нескольких глобальных игроков:

• Google - неоспоримый лидер рынка. На него приходится львиная доля мирового поискового трафика. В развитых странах его доля колеблется от 80 до 90%. В России успехи машины не столь впечатляющи: лишь 40% доля;
• Yandex - основной конкурент для Google в России, на данный момент занимает лидирующее место, по из-за смены поискового алгоритма в 2017 году постепенно стал терять свои позиции;
• ‒ занимает третье место в рунете (около 5%), поиск от известной российской компании, входит в состав Mail.Ru Group, которой принадлежат социальные сети «Вконтакте», «Одноклассники», поисковик Nigma (про него опишем ниже), платежная система Qiwi и много чего другого.
• Bing - служба от компании «Майкрософт». Лучшие результаты выдает прежде всего на английском языке. Русскоязычный сегмент практически не развит. Это, однако, не мешает Bing быть поисковиком № 2 в мире (7%);
• Далее с небольшим отрывом следует китайская компания «

  Разговор о поиске информации в сети был бы неполным без упоминания ключевого игрока на российском рынке - Яндекса. Ее основатели Аркадий Волож и Илья Сегалович запустили совместное предприятия задолго до появления на свет бренда Google. За много десятков лет поисковик выбился в топ крупнейших в мире (№4 с 2014 года).

  Основная причина такого феномена заключается в высочайшем качестве сервиса:

  • Яндекс первым запустил поиск с учетом русской морфологии. Эта новация позволила ему в 2001 году обскакать тогдашнего гиганта IT-индустрии Рамблера;
  • С 2009 года служба стала учитывать регион проживания пользователя. Благодаря этому региональные сайты получили импульс к развитию;
  • В том же году был запущен алгоритм машинного обучения «Матрикснет», который значительно увеличил скорость и качество работы сервиса;
  • Параллельно развивался англоязычный сайт, для которого Яндекс арендовал офис в Калифорнии;
  • В 2012 году результаты запроса стали учитывать персональные предпочтения конкретного юзера.

  Популярность системы постоянно растет: с 2001 по 2017 годы объем трафика увеличился в 280 раз. Но, как мы писали ранее, после кардинальной смены алгоритма в 2017 году, Яндекс стал терять долю своих посетителей в пользу Гугл, посмотреть полную статистику трафика рунета на текущий момент можно по ссылке .

  
  

  Как удалить информацию о себе из поисковика?

  Интернет является не только благом для всего человечества, но и потенциальным источником угроз. Некоторые из них создают значительную опасность для персональных данных рядовых пользователей. После попадания в сеть даже самые оскорбительные сведения удалить невозможно.

  Так, по крайней мере, было до недавнего времени. С января 2016 года в России действует закон «О праве на забвение». Теперь каждый человек, которого не устраивает его репутация в виртуальном мире, может очистить ее вполне легальным способом. Для этого необходимо:

  1. Подать соответствующее заявление организацию, оказывающую поисковые услуги;
  2. Приложить все возможные доказательства ложности и неактуальности данных, которые предлагается удалить из выдачи;
  3. Большинство поисковиков облегчают задачу пользователям. Отправить соответствующую просьбу можно через специальную форму онлайн (для Яндекса);
  4. На протяжении десяти дней компания будет проверять заявление на наличие законных оснований;
  5. При положительном исходе информация подлежит удалению из индекса;
  6. Если оснований для удаления не установлено, организация уведомляет об этом заявителя.

  Бессменный ведущий программы «Умницы и умники» Юрий Вяземский в одном из интервью упомянул, как обнаружил необычное слово у Булгакова и пытался найти его значение. Работа в библиотеке заняла целый год (!). Сегодня представить такую ситуацию невозможно: в интернете есть множество поисковиков. Один клик - и каждый может подключиться к мировому разуму.

  
  

  Видеообзор анонимных поисковых систем

  В данном ролике Антон Морозов расскажет, какие существуют поисковики, сохраняющие полную конфиденциальность пользователя:

Поисковые системы (поисковики) – подразумевают под собой сайт, с помощью которого можно задать любой вопрос и моментально получить на него ответ в виде всех сайтов известных вашей системе поиска.

Вы можете представить себе современный мир без интернета? Мир, в котором невозможно без пары щелчков мышью узнать нужную Вам информацию?

Какие существуют поисковые системы?

А Вы уверенны в том, что знаете, ? Поисковые системы можно разделить на несколько типов. Так принято выделять национальные поисковые системы, разработанные с учетом поиска необходимых для Вас сайтов конкретно в вашей стране, то есть поисковые системы в условиях внутренней передачи данных.

Многие подобные поисковые системы спустя десяток лет шагнули дальше, так сказать вышли за пределы государственных границ, но так и не стали транснациональными. Зарубежные поисковые системы предполагают собой выдачу ответа на вопрос с условием поиска по всем сайтам стран, включая любую доменную зону.

Поисковые системы «понимают» сайт несколько иначе, чем, например Вы сами. Существует множество нюансов и деталей не заметных для человеческого глаза.

Наша компания TopMaySeo обеспечит доступность контента Вашего сайта для всех поисковиков, разнообразит его, проведет усердную работу в структурной организации ссылок, сделает все, дабы Ваш ресурс любая поисковая система могла быстро обнаружить.

Какие существуют зарубежные (транснациональные) поисковые системы

С течением времени обычному человеку показалось не комфортным и трудным разнообразие сети и множество хаотичной информации в ней. Первой национальной компанией приложившей руку к воссозданию поисковых систем, с целью упорядочения возникшего хаоса, стала YAHOO . Вызвав национальный экономический бум, она поглотила многообразную паутину интернета.

Мир интернета получил возможность сортировать, а точнее грамотно разделять новую информацию по группам и направлениям. Однако YAHOO во многих деталях была значительно далека от полноценного ранжирования. Но прогрессируя и развиваясь (несмотря на свой возраст) сейчас она занимает практически лидирующие место в рейтингах.

Гигантом и лидером по праву среди международных поисковых систем 21 века можно считать Google . Он осуществляет глобальный поиск и находит информацию по различным запросам на многочисленных сайтах многих стран мира (больше 140) , без ограничения места их расположения и домена, а во многих из них является единым поисковиком.

Следует отметить, что две вышеописанные поисковые системы все язычные и доступны практически в любом уголке земного шара, что делает их более востребованными среди всех других поисковиков на рынке интернета.

Bing – современная система с мощным объемом трафика. Идея ее масштабной разработки принадлежит компании Microsoft. Особенность ее столь широкой популярности заключается в возможности просмотра требуемых результатов только на одной страничке, без перехода на многочисленные. Вторым положительным фактором считается логическая корректировка предлагаемого объема обширной информации при каждом запросе поиска и полученном результате.

Baidu – мощная, и пожалуй лучшая в своем функционировании, поисковая машина Китая . С учетом количества запросов в год, этот поисковый сайт уверенно держит позиции в первой тройке лидеров , с компаниями Google и YAHOO, а доля ее существования в глобальной сети всего мира составляет около 19% от всех обрабатываемых запросов нашей планеты.

MSN (Microsoft Network) – провайдер созданный компанией Microsoft и действующий по сей день, такого рода поисковик дает не плохую возможность для получения нужной Вам информации. Вы сможете с легкостью блуждать по сети или, например, выбрать конкретные для Вас категории включая возможность поиска при помощи личной энциклопедии Microsoft.

Академия Google (Google scholar) – находка для учащихся студентов, людей связанных с научной деятельностью, школьников и просто любителей расширить свой кругозор. «Академия Google» — предлагает Вам бесплатный поиск сведений по всем возможным дисциплинам, сюда же смело можно отнести сайты и тексты любого формата, достоверные данные из всемирно известных журналов, рейтинговые публикаций крупных мировых издательств. Здесь же присутствует и платный библиотечный поиск информации, часто необходимый для нахождения сведений в онлайн режиме в базах данных различных библиотек мира.

Ask.com – английская поисковая система компании Ask Jeeves. Ее работа заключается в простом и легком алгоритме действий, а именно, вы задаете вопрос, либо указываете ключевые слова и сразу получаете ответ.

Какие существуют русскоязычные поисковые системы

К русскоязычным относятся:

Mail.ru – казалось бы не самая узнаваемая в мире, но весьма крупная русскоязычная и показательная система поиска на территории Украины и других приближенных к ней стран. В первую очередь поисковая система приобрела такое признание благодаря сайту «Одноклассники», а так же почте «Mail.ru».

С 2006 года на нем было запущено множество тематических рубрик (проектов): авто, бизнес, здоровье, досуг и развлечение, новости и спорт. Благодаря своей простой общедоступности, на момент 2016 года, имидж этого ресурса продолжает неустанно расти, что позволяет говорить нам о хорошей репутации такого поисковика.

Rambler – по версии 2015 года популярность это поисковика значительно снизилась, однако функционировать Rambler продолжает по-прежнему и во многих зонах его работы можно заметить смелые решения и верные идеи. Так, за последний год результативным стало улучшение самого механизма поиска, дизайн заметно изменился, здесь же можно увидеть качественную динамику информации.

Yandex – по общей статистике, именно он занимает почетное лидирующие место среди русскоязычных систем. Многие, начинают свой тернистый путь поиска с него, и мало кто остается не довольным подачей материала и в частности функционированием. Наиболее выгодное положение система занимает в Украине и за ее пределами: Россия, Турция, Казахстан.

По своим показателям он частично уступает только заграничным поисковикам, таким как: Google, Baidu. В работе данного поисковика необходимо отметить эффективную работу навигационного поиска и правильную тематическую подборку, множество нужных ссылок при выдаче материала.

Nigma – удачно разработанная система студентами, в последствие ставшая хорошим примером. Поисковик напрямую связан с базой поиска компаний Google, MSN, Yandex , работая по схеме взаимопомощи, конечно больше необходимой для самой Nigma.

Рядом со ссылкой из списка обычно указывается точное название той поисковой системы, откуда был взят материал. Кстати, этот вариант поиска больше всего подойдет школьникам, учителям, аспирантам, а сервисы Nigma по математике и химии помогут Вам успешно решать задачи, формулы, преобразовывать и вычислять размерности.

Помните, каждый человек посещающий просторы интернета выбирает те поисковые системы, которые ему ближе, удобнее, но чаще всего Вы просто к одной из них привыкли.

Выше были приведены основные принципы работы и характеристики наиболее знаменитых поисковых систем.

Опыт показывает, что по поисковым системам занятие кропотливое и очень непростое. Ведь каждый ресурс имеет множество своих загвоздок, разных алгоритмов, другое ранжирование и сортировку.

А Ваш сайт должен быть универсален, не так ли? То есть, занимать рейтинговое место. Все довольно просто объяснить! Любые поисковые системы (в соответствии с заложенной в них программой) учитывают нужные именно ей различные факторы на вашем сайте.

Компания TopMaySeo поможет Вам увидеть свой сайт иначе! Наши специалисты покажут Вам недостающие технические детали, скоординируют правильное и пошаговое направление в разработке его.

Ваш сайт станет посещаемым, успешным и понятным для всех показательных и всемирно известных поисковых систем интернета.

В сети не только искать, но и находить нужную информацию довольно просто. Что делать, если Вам нужно найти рецепт лимонного пирога или достопримечательность города, который Вы хотите посетить? На помощь нам летят поисковые системы.

Поисковая система - это сайт, позволяющий пользователям искать информацию по введенному запросу на существующих веб-страницах в интернете.

Обычно поисковая система состоит из одного, но самого важного элемента — поисковой строки, сравните несколько сайтов:

Какие бывают поисковые системы и чем они отличаются

Большое разнообразие зарубежных и отечественных, гигантских и маленьких, хороших и так себе. Они отличаются друг от друга алгоритмом работы и областью всемирной паутины, в которой ищут. Российские обращают внимание на , в которой находится сайт (доменная зона пишется после названия сайта через точку: «.ru» — если в России или «.ua» - если в Украине и т.д.) и ищут только в России и странах бывшего советского союза, мировые же поисковые системы ищут везде .

В настоящее время существуют два абсолютных лидера - «Яндекс» и «Google» («Гугл»). В мире поисковых систем «Google» занимает четкое первое место, 46% пользователей интернета во всем мире выбирает его, однако в России его популярность несколько меньше, он на втором месте после «Яндекса».

«Гугл» настолько прочно закрепил свою позицию, что в реальной жизни появилась фраза «google it» или по-русски «загугли», она произносится, когда нужно отослать незнающего человека штудировать информацию в сети

Тем не менее, существуют и другие поисковые системы, перечислим основные

Три мировых лидера:

Гугл - http://www.google.com/ — 46.2%
Яху - http://www.yahoo.com/ — 22.5%
МСН - http://search.msn.com/ — 12.6%

Три российских лидера (без учета второго места, которое занял «Google» c 26%):

Яндекс - http://www.yandex.ru/ — 45,7%
Рамблер - http://www.rambler.ru/ — 15,1%
Мэйл.ру - http://www.mail.ru/ — 6.6%

Как пользоваться поисковыми системами?

Прежде всего, помните, что сейчас почти все по умолчанию используют определенную поисковую систему и позволяют искать запрос сразу же в адресной строке самой программы. В браузере Google Chrome (Гугл Хром) по умолчанию стоит поисковая система «Google» (разумеется, ведь, оба продукта принадлежат одной из самых крупных корпораций, разрабатывающей важнейшие составляющие для работы в интернете).

После нажатия на enter появится окно с результатами, которые представляют из себя перечень сайтов, содержащих данную фразу. На нашем конкретном примере, выдача результатов будет такой:

Нам остается лишь перейти по одной из ссылок, чтоб почитать, что это такое. Если мы ищем, как эта глазовыколупывательница выглядит, то нажимаем сверху вкладку «Картинки» и получаем целый набор картинок с этим названием.

Так же можно переходить непосредственно на сам сайт системы и искать уже там. А какой конкретно сайт выбрать — решать Вам.

Основные ошибки при поиске

Главное, помнить о том, что поисковая система не обладает человеческим разумом и спрашивать её в той форме, в которой обычно спрашиваем человека — нет смысла. Типичный пример - запросы из серии «где мне найти Васю Петренко в интернете?», такая постановка в корне некорректна.

Поисковая система ищет на существующих сайтах конкретные фразы , которые вы задаете.

То есть она не думает и не анализирует смысл написанного, а всего лишь ищет сайт и статьи, содержащие введенное Вами название (не считая различных математических операций: попробуйте в гугле найти, сколько будет 6+8-5.)

Возвращаясь к нашему запросу про Васю: корректно было бы писать основную мысль, главную суть поиска, то есть «Вася Петренко», а не то, где его можно найти. Но таких Вась Петренко миллион, поэтому нужны различные дополняющие слова, но не «Вася Петренко со шрамом на правом ухе, братуха мой», а, например «Вася Петренко фотограф Москва».

Пусть Вас не вводит в заблуждение появление тонны сайтов с готовыми рецептами, после поиска «что приготовить на ужин», система не поняла суть Ваших желаний, она просто нашла сайты с этой фразой.

Надеемся, что Вы освоили тему и теперь с уверенностью можете рассказывать и другим, как искать информацию в интернете. А пока потренируйтесь, попробуйте найти ответы на вопросы:

1. Сколько времени в токио?
2. Почему небо голубое?
3. Сколько попугаев в удаве?
4. Чем питаются комары в лесу?