Обзор технологий поиска новой информации

Введение

За последние несколько лет интенсивно развивались и достигли высокого уровня механизмы поиска информации в Интернет. Появилось большое количество мощных поисковых систем. Однако найти нужную информацию становится все труднее. Это связано с тем, что объем информации в Интернете растет лавинообразно и доля информационного «шума» постоянно возрастает.

В сложившейся ситуации важное значение приобретает умение человека правильно использовать мощный механизм поисковых систем. Нужно не только уметь правильно составить поисковый запрос, но и грамотно подбирать ключевые слова по заданной теме

Также важно учитывать особенности языка и специфику документального поиска.

Текст в SEO — важная составляющая сайта

Поисковая система анализирует текстовое содержание сайтов, чтобы определить, насколько конкретная страница соответствует введённому пользователем запросу. Другими словами, смотрит релевантность страницы

Релевантность оказывает наибольшее влияние на позиции сайта, поэтому оптимизаторы уделяют текстам особое внимание.

При этом важно следить за тем, чтобы текст не был заспамлен ключевыми словами, так как за это поисковые системы быстро отправят сайт в бан. Ранее мы рассказывали о том, к каким последствиям может привести использование переспамленного текста.. Спасением от переспамленных текстов стало понимание метода анализа, который помогает поисковой системе разделить все слова на определённые группы по тематикам, установить между ними связи

Он называется LSI — латентно-семантический индекс (Latent Semantic Index). 

Спасением от переспамленных текстов стало понимание метода анализа, который помогает поисковой системе разделить все слова на определённые группы по тематикам, установить между ними связи. Он называется LSI — латентно-семантический индекс (Latent Semantic Index). 

Разговоры об этом методе не утихают в кругах SEO на протяжении последних пары лет. 

В статье разберем, что же такое LSI и как мы его применяем, чтобы создавать тексты, эффективные для продвижения и безопасные с точки зрения поисковых фильтров.

И дадим рекомендации для создания эффективного текста. Вы сможете проконтролировать качество своего контента или того, что предлагает подрядчик.

Облачный сервер (Cloud-hosting)

Тип хостинга, который отличается от Virtual dedicated server отсутствием конкретных тарифов с ограничениями по используемым ресурсам (вычислительная мощность, оперативная память, место на жестком диске).

Преимущества:

• в любой момент, в зависимости от Ваших потребностей, можно увеличивать все необходимые параметры (автоматически или по запросу) путем задействования дополнительных мощностей «облака».
• при расчете стоимости услуги облачного вида хостинга основные характеристики (ресурсы), которые реально используются – это главный ценообразующий фактор.

Недостатки: нет.

Развитие и рынок поисковых систем

В рунете лидируют 2 поисковые системы — Google и Яндекс. По состоянию на март 2021 года доля этих поисковиков распределилась следующим образом:

• Google — 59.6%
• Яндекс — 38.7%

За ними следуют Search.Mail.ru (1.5%), Rambler (0.1%) и Bing (0.1%).

В Европе лидирует Google (92.92%), за ним идет Bing (3.48%) и Яндекс (1.48%).

В США в лидерах Google (88.1%), Bing (6.16%) и Yahoo! (2.96%).

Сможет ли кто-то или что-то пошатнуть монополию Google? В 2020 году случилось сразу 2 серьезных неприятности для лидера поисковиков:

1. В СМИ заговорили о том, что Apple может создать свою поисковую систему и стать прямым конкурентом. Пока это лишь разговоры, но технологические возможности у самой дорогой компании в мире точно есть. Более того, в конце 2014 года в Apple уже рассматривали вариант прекращения сотрудничества с Google и могут вернуться к этому снова. Впрочем, Apple хорошо и с Google — только за использование своего поисковика на iOS, как установленного по умолчанию, Apple получает от Google 9 миллиардов долларов ежегодно.
2. Куда более серьезная угроза — иск к Google от Минюста США из-за монополии на рынке поисковиков и требование продать Chrome, а также часть рекламного бизнеса. Последний раз такая громкая история была в 1998 году, когда был подан аналогичный антимонопольный иск против компании Microsoft. Такие судебные разбирательства могут длиться годами и пока сложно сказать, как именно это закончится для Google. Компании Microsoft пришлось выплачивать многомиллионные штрафы и пойти на условия суда, например, требование делиться своим API со сторонними разработчиками. То разбирательство повлияло на решение Билла Гейтса уйти из компании в 2000 году, он также заявил, что если бы не иски, Microsoft бы лидировал на рынке мобильный операционных систем, и все бы использовали Windows Mobile вместо iOS и Android. Посмотрим, чем закончится суд для Google.
3. В мировом масштабе монополию может пошатнуть поисковик Дакдакгоу (DuckDuckGo), который позиционирует себя как конфиденциальная поисковая система (кстати, используется по умолчанию в браузерах Tor). Причина этому — большое количество скандалов, связанных с утечкой данных в американских сервисах (например, обвинения в адрес Facebook или взлом Gmail). Google периодически обвиняли в сливе данных и нарушении неприкосновенности частной жизни еще с 2005 года.
4. В российском масштабе — закон о предустановке российского ПО на ввозимые в Россию смартфоны, планшеты, компьютеры и смарт-тв для продажи. Закон вступает в силу 1 апреля 2021 года.

Заключение

С 2009 и по наши дни поисковики стремительно развиваются и с завидной периодичностью меняют / улучшают алгоритмы поиска, чтобы в выдаче попадался контент, наиболее подходящий запросам пользователя. Так если лет 10 назад можно было «скормить» поисковым роботам статьи, переоптимизированные ключевыми словами или закупиться ссылками и выбиться в ТОП поиска, то сейчас таким сайтам ничего не светит (вернее, светит попадание под фильтры).

Теперь поисковики учитывают поведенческие факторы (как одно из условий при ранжировании): сколько времени человек проводит на сайте, переходит ли на другие страницы, возвращается ли на сайт через время. А также уникальность, юзабилити сайтов, качество внешних ссылок (а не их количество). Новые алгоритмы мотивируют вебмастеров создавать полезный контент, написанный понятным человеческим языком. Постоянная смена алгоритмов — головная боль для SEO-специалистов, но шаг навстречу обычным пользователям, которые хотят видеть качественные сайты с ответами на свои вопросы, а не полотна ключевиков.

Полезные статьи:

• 10 лучших сервисов для SEO-аудита сайта
• Как стать SEO-специалистом с нуля
• Пошаговая инструкция по оптимизации страниц сайта для поисковиков

Как правильно составить поисковой запрос

Языки поисковых запросов меняется в зависимости от поисковика. Однако есть  общие правила для всех поисковиков. Некоторые из них рассмотрим прямо сейчас:

1. Если правило нужно распространить и на одно предложение, и на весь документ, команды удваиваются;
2. Можно использовать несколько логических операторов в одном запросе;
3. Для нескольких команд в запросе, нужно использовать знаки открывающей и закрывающей скобок;
4. Для поиска по точному вхождению фразы, используются кавычки;
5. Для поиска по точному вхождению фразы, без словоформ используются кавычки с восклицательным знаком перед каждым словом;
6. Чтобы найти дубли статей, скопируйте разумную часть текста статьи и введите ее в поиск. Статья должна быть проиндексирована.

Так как поисковики ищут информацию не только по точным словам запроса, то знание языка поисковых запросов дает разнообразный анализ выдачи. Это помогает расширить семантическое ядро и писать тексты статей, отвечающие различным видам запроса.

Какие принципы лежали в основе работы первых поисковых систем

На заре появления Интернета лишь небольшое количество пользователей имело возможность к нему подключиться. Объем доступной информации тоже был невелик. В Интернете в то время работали в основном сотрудники научно-исследовательских организаций. Поиск информации в Сети был не так популярен, как в настоящее время.

Первой попытку организовать доступ к электронным данным через Интернет предприняла поисковая система Yahoo!, появившаяся в 1994 году.

Разработчики компании создали открытый каталог сайтов, ссылки на которые были сгруппированы по соответствующей тематике. С ростом количества ресурсов в базе возникла необходимость по добавлению опции поиска по каталогу. Это еще не была поисковая система в привычном для нас виде, т. к. она искала информацию по внутренней базе сайтов, а не по всем существующим интернет-ресурсам.

Подобные каталоги ссылок пользовались раньше большой популярностью, но сегодня потеряли свою актуальность, т. к. количество сайтов постоянно увеличивается. Например, в самый большой из современных каталогов в Интернете DMOZ (другое название — Open Directory Project) входит около 5 млн сайтов, при этом в базе поисковой системы Google содержится более 8 млрд ссылок.

В 1994 году появилась первая настоящая поисковая система WebCrawler.

В 1995 году были созданы еще два поисковика: Lycos и AltaVista. Последняя поисковая система долгое время занимала лидирующие позиции в сфере онлайн-поиска информации.

В 1997 году студенты Стэнфордского университета Сергей Брин и Ларри Пейдж разработали поисковую систему Google, которая стала самой востребованной в мире.

Так же в 1997 году начала работу поисковая система Яндекс, пользующаяся популярностью в Рунете.

Владение пользовательскими инструментами и техникой

Не забывайте о команде Find браузера
      
Если ваш браузер имеет в меню Файл, Правка или Вид команду Find (Найти), используйте ее для обнаружения трудноуловимых ключевых слов страницы. Чтобы отыскать слово, которое вам нужно, воспользуйтесь комбинацией клавиш CTRL+F в вашем
браузере и введите искомое ключевое слово.
      
Фиксируйте результаты ссылками и закладками
      
1. Сохраняйте ссылки на важные и часто посещаемые страницы, используя команду Добавить в «Избранное». Используйте подобные механизмы для регистрации предварительных результатов поиска в процессе беглого отбора с целью дальнейшего подробного изучения.
      
2. Поддерживайте свою персональную коллекцию ссылок в рабочем состоянии: актуализируйте и систематизируйте ее, удаляйте устаревшие и ненужные.
      
3. Некоторые машины поиска, например AltaVista, позволяют отмечать закладкой успешный результат поиска. Благодаря этому позднее можно вернуться к данной подборке документов и просмотреть ее.
      
4. Существуют специализированные программные средства — интегрируемые модули расширения для стандартных
браузеров, которые индексируют информационные ресурсы ранее посещаемых узлов. Они способны выполнять полнотекстовый поиск документов на любом узле, включая результаты обработки запросов.

      
Сохраняйте копии важных документов
      
Активно используйте команды контекстного меню Сохранить объект как… и Сохранить рисунок как… и команду меню Файл – Сохранить как… для создания копий необходимой вам информации из сети Интернет на локальном ресурсе вашего ПК. Этим вы решите некоторые проблемы:
      
1) изменчивости и недолговечности WWW (когда со своих адресов со временем исчезают страницы и целые сайты),
      
2) концентрации внимания исключительно на целях определенного этапа поиска (например отбор адресов или предварительный просмотр найденной информации),
      
3) экономии времени on-line подключения и перевод изучения отобранных материалов в режим off-line.

      
Отключайте вывод изображений
      
Если вы не желаете видеть многочисленные рекламные заставки и для вас важен не дизайн сайтов, а их содержательная информация, измените заданный режим просмотра в
браузере на режим вывода только текста (исключив возможности мультимедиа). Это значительно увеличит скорость поиска

При этом, если возникнет необходимость быстрого просмотра важной графической информации, воспользуйтесь пунктом контекстного меню
Показать рисунок, кликнув для его вызова правой кнопкой мыши в место невыведенного рисунка

      
Не теряйте самоконтроль
      
Интерактивная среда WWW увлекает, и зачастую после нескольких десятков минут Web-серфинга мы забываем: как попали на данный сайт, что хотели найти и по какому адресу расположена только что просмотренная уникальная информация… И в этом случае не пренебрегайте функциями вашего
браузера Назад и Вперед, которые помогают упорядочить навигацию. Чтобы не терять информацию и время, приучите себя всегда явно определять цель предстоящего on-line сеанса и при работе стараться не отступать от нее, оставляя прочие возникающие идеи и желания на потом. Планирование поисковой работы по этапам также даст результат: поиск станет более осознанным и систематичным, а результат – более полным и точным.

Религиозные поисковые системы

Глобальный рост Интернета и электронных СМИ в арабском и мусульманском мире за последнее десятилетие побудил приверженцев ислама на Ближнем Востоке и на азиатском субконтиненте попробовать свои собственные поисковые системы, свои собственные поисковые порталы с фильтрами, которые позволили бы пользователям выполнять безопасный поиск . Эти исламские веб-порталы, более чем обычные фильтры безопасного поиска , классифицируют веб-сайты как « халяльные » или « харам » на основании толкования «Закона ислама» . ImHalal пришел онлайн в сентябре 2011 года Halalgoogling пришел онлайн в июле 2013 г. Эти используют Хары фильтров на коллекции от и Bing (и других).

В то время как отсутствие инвестиций и медленные темпы развития технологий в мусульманском мире препятствовали прогрессу и препятствовали успеху исламской поисковой системы, ориентированной на основных потребителей, приверженцев ислама, такие проекты, как Muxlim , сайт о мусульманском образе жизни, действительно получили миллионы долларов от таких инвесторов, как Rite Internet Ventures, и это тоже пошатнулось. Другие поисковые системы, ориентированные на религию, — это Jewogle, еврейская версия Google, и SeekFind.org, которая является христианской. SeekFind фильтрует сайты, которые атакуют или унижают их веру.

Поиск

Все предыдущие шаги незаметны для пользователя, поскольку они выполняются в поисковой машине. А вот сам поиск — это и есть то, что видит пользователь. Он вводит в поисковую строку свой запрос (слово или словосочетание), и поисковая машина — о, чудо! — выдает список ссылок на страницы в Интернете.

Как это работает? Когда пользователь вводит какое-нибудь слово в строку запроса поисковика, поисковая машина обращается к индексу, находит запись о заданном слове, извлекает все номера страниц, относящиеся к нему, и показывает пользователю результаты поиска, то есть список страниц.

В списке результатов обычно отображаются заголовок страницы (так называемый титул), дата создания страницы, ее адрес, цитата из текста страницы с подсвеченным искомым словом. Откуда взялась эта цитата, мы расскажем далее, в разделе, описывающем устройство индекса.

Если же в запросе было несколько слов, то поисковая машина сравнивает списки ссылок на страницы для каждого слова и выбирает только те страницы, номера которых повторяются, то есть встречаются в каждом списке страниц для каждого слова. Таким образом, выбираются только те страницы, на которых одновременно встречаются все слова запроса.

Конечно, здесь изложена самая суть механизма поиска по индексу, его основной принцип, а в реальности разработчики поисковиков используют множество разнообразных ухищрений (о некоторых из них вы узнаете ниже).

Поисковик тем лучше, чем более «правильные» страницы он показывает пользователю в ответ на запрос. «Правильные» страницы называются релевантными (то есть относящимися к делу, уместными).

Чтобы понять, как поисковику удается находить наиболее релевантные страницы, нужно разобраться в том, как устроен индекс поисковой машины.

Как осуществляется поиск поисковой системой?

Сам поиск в интернете, ровно так же как просмотр веб сайтов возможен при помощи интернет обозревателя – браузера. Только после того, как пользователь задал свой запрос в строке поиска, осуществляется непосредственно и сам поиск.

Любая поисковая система содержит программную часть, на которой основан весь поисковой механизм, его называют поисковым движком — это программный комплекс и обеспечивающий возможность поиска информации. После обращению к поисковику, формирования человеком поискового запроса и ввода его в строку поиска, поисковая система генерирует страницу со списком результатов поиска, наиболее релевантные, по мнению поисковика тут располагаются выше.

Релевантность поиска – поиск наиболее отвечающих запросу пользователя материалов и расположение на них гиперссылок на странице выдачи с более точными результатами выше других. Само распределениерезультатов называется ранжированием сайтов.

Так как же поисковик подготавливает для выдачи свои материалы и как происходит поиск информации самим поисковиком? Сбору информации в сети способствует уникальный для каждой поисковой системы робот или по-другому бот, обладающий так же рядом других синонимов как краулер или паук, а саму работу системы поиска можно разделить на три этапа:

К первому этапу работы поисковой системы можно отнести сканирование сайтов в глобальной сети и сбор на свои собственные серверы копий веб страниц. Это образует огромное количество пока ещё не обработанной и не пригодной информации для поисковой выдачи.

Второй этап работы поисковика сводится к приведению в порядок полученной ранее, на первом этапе информации от сайтов. Производится такая сортировка, которая за наименьшее время будет благоприятствовать тому самому качественному поиску, которого собственно и ждут пользователи от поисковой системы. Этап называют индексацией, это значит, что страницы уже являются подготовленными к выдаче, а актуальная база будет считаться индексом.

Как раз третий этап и обуславливает поисковую выдачу, после приёма запроса от своего клиента, опираясь на ключевые или около ключевые слова, указанные в запросе. Это способствует отбору наиболее соответствующей запросу информации, и последующей её выдачи. Так как информации, очень и очень много, поисковая система выполняет ранжирование в соответствие со своими алгоритмами.Лучшей поисковой системой считается та, которая сможет предоставить наиболее корректно отвечающий на запрос пользователя материал. Но и тут могут встречаться результаты, на которые повлияли люди, заинтересованные в продвижение своего сайта, такие сайты хоть и не всегда, но зачастую появляются в результатах поиска, но не на долго.

Хоть мировые лидеры уже во многих регионах определены, поисковые системы продолжаются развивать свой качественный, поиск. Чем качественней поиск они смогут предоставить, тем больше людей будут им пользоваться.

Международные поисковые системы

Самые известные международные поисковики

• Китайский поисковик Байду
  Сайт является четвертым в мире по посещаемости. 92% его аудитории составляют граждане Китая.
• Поисковик Ask
• Французский поисковик Qwant.
  Вышел в свет в 2013 году как альтернатива Гуглу.
• Metasearch Search Engine — Search.com.
  Этим поисковиком можно воспользоваться, если ничего не нашли в Гугле
• AlltheWeb. Поисковик, созданный в Норвегии.
  Назван «открытием 1999 года». В результатах поиска американские сайты не доминируют.
  Ищет также картинки, видео и аудио. Спецпоиск по научным сайтам.
• LYCOS
• Live Search. Также от Микрософт.

Как мы используем LSI?

Мы подбираем тематические фразы, чтобы составить техническое задание для копирайтера.

Рассмотрим пример составления ТЗ для написания текста. Текст разместим на сайте дилера в Уфе на странице модели Lexus LX 570.

Шаг 1. Определяем запросы

От 20 до 80 запросов в среднем приходится на каждую продвигаемую страницу сайта. Из всего списка мы выбираем приоритетные запросы: чаще частотные или конверсионные. Например, для сайтов автодилеров это запросы, которые содержат «официальный дилер». 

Остальные запросы делим на группы и пишем составные запросы.

Шаг 2. Подбираем тематические LSI-фразы

Далее загружаем в сервис PixelTools полученный сокращенный список запросов, выбираем регион продвижения, нажимаем кнопку «Обработать».

 

Необходимые нам LSI-фразы находятся в двух правых столбцах. Копируем оба столбца и чистим слова, которые выбиваются из логики текста. Например, для текста автодилера из Уфы точно не подойдут слова «Москва» или «Россия». Также исключаем сокращения («лкс»), слова, которые уже встречаются на странице («фото») и слова, которые будут неуместно смотреться в тексте («объявление», «рубль»).

Шаг 3. Составляем ТЗ

Полученную в ходе обработки информацию формируем в задание. LSI-запросы отмечаем как рекомендуемые к использованию. Дополнительно указываем технические требования к тексту.

Итоговое задание копирайтеру выглядит следующим образом:

Работа поисковых систем

Условно считается, что история создания поисковых систем берет свое начало с 1989 года. Именно тогда был создан сервис Арчи, главная задача которого была индексация информации, которую можно найти в интернете (в пространстве WWW). Система изобретена и создана программистом Аланом Эмтеджем. И алгоритмы, которые он в ней использовал, в базовом понимании используются и по сегодняшний день. Правда, данный сервис был локальным.

А уже в 1996 году была создана программа BackRub. Её главное преимущество — она выполняет глобальную индексацию. Уже в 1998 году система будет переименована в Google. А сейчас это — самый популярный сервис в мире для поиска информации в интернете (по данным аналитиков, его использует порядка 85% всех интернет-пользователей).

Общий принцип работы любой поисковой системы условно можно разделить на следующие этапы:

1. Сбор информации. Специальная программа сканирует веб-пространство, открывает каждый доступный для неё сайт и анализирует его по заданным алгоритмам.
2. Все документы закачиваются на сервер поисковой системы и создается база данных, которая содержит информацию о сайте.
3. На основе полученных по сайту данных проводится построения индекса. То есть определяется, какие данные на нём содержатся, к какой группе запросов относятся данный контент их можно отнести и так далее.
4. Программа определяет релевантность страницы,  в момент когда она получает пользовательский поисковый запрос, на его основе предоставляет перечень сайтов, которые по результатам индексирования содержат запрашиваемую информацию.
5. Сервис проводит ранжирование результатов выдачи. То есть выстраивает порядок ссылок, которые будут показаны пользователю, отправившему запрос.

Описанный принцип работы информационно поисковых систем — это лишь условное пояснение, как работает тот же Google или Яндекс. Но вот алгоритмы, которые они используют для обхода, сайтов, индексации и ранжирования, обычным пользователям неизвестны, каждая поисковая система применяет свои алгоритмы и постоянно их совершенствует, так как обработка информации занимает большое количество ресурсов сервера, расходы на который лежат на поисковой системе.

Понятно лишь одно — каждый сайт анализируется по более чем 1000 критериев. И именно благодаря этому пользователь, отправивший поисковый запрос, в 99% случаев в ответ получает ссылку, на страницу с полезной информацией.

Поисковые системы бывают нескольких подвидов и существуют и другие вариации таких сервисов:

• управляемые человеком (то есть каталог сайтов, каждый пункт которого и общая их база данных сформированы вручную пользователем, яркий пример каталог Rambler, );
• гибридные поисковые системы (где часть работы выполняет человек, часть — программа,принцип работы поисковой системы Google как раз таковой);
• мета-системы (которые не составляют базу данных, а дают результат сразу из нескольких поисковых сервисов пример Vivisimo).

И многие рядовые пользователи ошибочно полагают, что особенности работы поисковых систем таковы, что поиск оптимальных результатов для выдачи выполняется в режиме реального времени. Нет, выполнить анализ значительной части веб-пространства за несколько секунд — невозможно. Даже суперкомпьютерам для этого понадобится несколько месяцев, а то и лет. Поэтому без предварительной обработки информации, и постоянного ранжирования не обойтись.

Поисковые системы Интернета, список 2019 года

Перед тем, как пополнить поисковые систем списком, сделаем для начала небольшой обзор на топ 14 лучших поисковых систем 2019 года.

1. Поисковая система Google. Она является самой популярной и известной во всём мире в том числе США и Европе.
2. Поиск Яндекс. Эта российская поисковая система. В основном она имеет популярность в русскоязычном Интернете.
3. Bing. Данный поиск в Интернете был разработан компанией Майкрософт. Его часто используют в США, Германии, и в Китае.
4. Поисковик Yahoo. Данная поисковая «машина» Интернета не так популярна в России, как например в странах Индии, США, Индонезии и так далее.
5. Китайская поисковая система Baidu. Этим поисковиком пользуются только китайцы. Поскольку у него полностью отсутствует перевод на русский язык.

Низкие по рейтингу поисковые системы

1. AOL. Название данного поисковика Америка Онлайн. Это американский поисковик.
2. ASK.COM.  Такая поисковая система, немного похожа на ресурс Ответы Мейл ру. Только в виде ответов выдаёт полноценные статьи.
3. EXCITE. Эта поисковая система, включает в себя не только поиск, но и различные сервисы. Например, Новости, погода, с помощью него можно узнать в какие страны ездят отдыхать и так далее.
4. DuckDuckGo. Такая поисковая система позволяет пользователям «сидеть в Интернете» в приватной зоне.
5. WOLFRAM ALPHA. Данный поисковик очень хорошо подойдёт студентам. Поскольку он выдаёт информацию на основе различных знаний и поможет Вам написать студенческие работы.
6. Спутник. Поисковая система в основном предназначена для поиска в Рунете. Она потеряла свою популярность, поскольку ею никто не пользуется. Но со временем, на неё должны перейти государственные служащие.
7. TUT BY. Поисковик относится к белорусской поисковой системе.
8. Рамблер. Это встроенный поисковик в систему поиска Яндекса.
9. MIL.RU. Русскоязычная поисковая система. Она популярна и её посещают не более чем 54 000 000 пользователей Рунета.

Итак, мы рассмотрели лучшие поисковые системы Интернета, список, которых Вы можете посмотреть здесь (Скрин 2).

Далее, мы эти поисковые системы разберём ещё подробнее.

Что такое LSI?

Поисковые системы совершенствуются. Сегодня они стремятся выдавать на первых строчках максимально полезный контент. То есть тот контент, который решает проблему пользователя, а не просто содержит ключевые слова. 

Приведем популярный пример: если ввести запрос «купить новую машину», поисковая система без труда поймёт, что пользователь хочет найти автосалон, где можно купить новый автомобиль. В выдаче выведутся релевантные запросу страницы. При этом ключевое слово «машина» на них даже не будет использовано.

Благодаря алгоритму LSI поисковая система умеет распознавать близкие по значению слова.

Из примера видно, что алгоритм LSI определяет слова «машина», «авто» и «автомобиль» в одну тематическую группу. Поэтому при запросе «купить новую машину» показываются также сайты, содержащие фразу «купить авто» и «продажа новых автомобилей».

Практика показывает: поисковые системы отдают предпочтение текстам с тематическими словами (LSI-фразами). Они считают, что LSI-тексты дают наиболее полный ответ на запрос пользователя. Поэтому они наиболее эффективны с точки зрения поискового продвижения.  

Рыночная доля

По состоянию на август 2021 года является самой используемой поисковой системой в мире с долей рынка 92,03%, а другими наиболее часто используемыми поисковыми системами в мире были Bing , Yahoo! , Baidu , Яндекс и DuckDuckGo .

Россия и Восточная Азия

В России доля Яндекса составляет 61,9% по сравнению с 28,3% у Google. В Китае Baidu — самая популярная поисковая система. Собственный поисковый портал Южной Кореи Naver используется для 70% поисковых запросов в стране. Yahoo! Япония и Yahoo! Тайвань является наиболее популярным местом для поиска в Интернете в Японии и на Тайване соответственно. Китай — одна из немногих стран, где Google не входит в тройку ведущих поисковых систем по доле рынка. Ранее Google был ведущей поисковой системой в Китае, но отказался от нее после разногласий с правительством по поводу цензуры и кибератаки.

Европа

На рынках большинства стран Европейского Союза доминирует Google, за исключением Чехии , где Seznam является сильным конкурентом.

Поисковая система Qwant базируется в Париже , Франция , откуда она привлекает большую часть своих 50 миллионов зарегистрированных пользователей в месяц.