Как работают поисковые системы? Руководство по пониманию алгоритмов движка …

Поисковые системы – это ваш портал в Интернет. Они берут большой объем информации с веб-сайта, разбивают его и принимают решения о том, насколько хорошо он реагирует на конкретный запрос. Но как на самом деле работают поисковые системы с таким большим объемом данных?

Для обнаружения, ранжирования и ранжирования миллиардов веб-сайтов, составляющих Интернет, поисковые системы используют сложные алгоритмы, которые принимают решения о качестве и релевантности любой страницы. Это сложный процесс, включающий значительные объемы данных, которые должны быть представлены таким образом, чтобы конечные пользователи могли легко их усвоить.

Поисковые системы анализируют всю эту информацию, рассматривая множество различных факторов ранжирования на основе запроса пользователя. Это включает в себя релевантность вопроса, написанного пользователем, качество контента, скорость сайта, метаданные и многое другое. Каждая точка данных объединена, чтобы помочь поисковым системам оценить общее качество любой страницы. Затем веб-сайт классифицируется на основе своих расчетов и представляется пользователю.

Понимание закулисных процессов, которые происходят в поисковых системах для принятия этих решений, не только помогает вам понять, почему определенные части контента имеют высокий рейтинг, но также помогает вам создавать новый контент с потенциалом для более высокого ранга. .

Давайте рассмотрим общие процедуры, на которых основан каждый алгоритм поисковой системы, а затем разберем четыре основные платформы, чтобы увидеть, как они это делают.

Как работают поисковые системы?

Чтобы быть эффективными, поисковые системы должны точно понимать, какая информация доступна, и представлять ее пользователям в логической форме. Для этого они выполняют три основных действия: сканирование, индексирование и ранжирование.

Поиск в Google по запросу “Лучшие беспроводные наушники 2019 года”

Проанализируем эти результаты:

• Запрос пользователя: Вопрос, который пользователь задал Google.
• Покупки в Google: Google рассматривает цель этого запроса как поиск товаров для покупки. В результате они выбирают из своего индекса продукты, которые соответствуют этому намерению, и отображают их первыми в результатах.
• Фрагмент функций: Результат сети знаний. Google представляет информацию, относящуюся к результатам выдачи, чтобы пользователям было проще просматривать их, не покидая страницу результатов.
• Высокие результаты: Первый сайт, который появляется в результатах, – это тот сайт, который, по мнению Google, лучше всего соответствует замыслу запроса пользователя. Наилучший результат ранжирования – это результат с наилучшей производительностью на основе пяти факторов ранжирования, которые мы обсуждали ранее.
• Еще спрашивают: Эта диаграмма – еще один результат Сети знаний. Он предлагает пользователям быстрый способ перейти к другому запросу, который может еще больше соответствовать их намерениям.

Эти результаты возможны только потому, что Google хранит информацию на каждой из этих страниц в своем индексе. Прежде чем пользователь выполнит поиск, Google проверит веб-сайты, чтобы определить, какие ключевые слова и цели совпадают. Этот процесс упрощает быстрое заполнение страницы результатов при проведении поиска и помогает Google предоставлять наиболее релевантное содержание.

Как самая популярная поисковая система, Google более или менее построил основу для просмотра содержания поисковыми системами. Большинство маркетологов настраивают свой контент специально для ранжирования в Google, что означает, что они потенциально упускают из виду другие платформы.

Алгоритм поиска Bing

Bing, проприетарная поисковая система Microsoft, для отображения результатов использует алгоритм векторного поиска с открытым исходным кодом, называемый Space Partition Tree And Graph (SPTAG). Это означает, что они движутся в совершенно ином направлении, чем поиск Google по ключевым словам.

Открытый исходный код означает, что любой может посмотреть код, составляющий результаты поиска Bing, и прокомментировать. Эта открытая модель противоречит жесткому контролю Google над своими алгоритмами. Сам код разделен на два отдельных модуля: генератор индекса и поисковик:

• Построитель индекса: Код, который работает для классификации информации веб-сайта в векторы
• Искатель: Как Bing устанавливает связи между поисковыми запросами и векторами в своем индексе

Второе большое различие между Bing и Google заключается в том, как информация хранится и индексируется. Вместо модели с первым ключевым словом, как в Google, Bing разбивает информацию на отдельные точки данных, называемые векторами. Вектор – это числовое представление концепции; Эта концепция лежит в основе поисковой структуры Bing.

Поисковые запросы для Bing основаны на алгоритмическом принципе под названием Approximate Nearest Neighbor, который использует модели глубокого обучения и естественного языка для обеспечения более быстрых результатов на основе близости определенных векторов друг к другу.

Результаты поиска Bing по запросу “Лучшие беспроводные наушники 2019 года”

Хотя результаты похожи по структуре, Bing выходит из разных веб-сайтов как для покупок, так и для выбора фрагментов функций. Верхний результат также отличается от нашего поиска Google, хотя оба они достаточно хорошо соответствуют нашему замыслу.

Если вы думаете об адаптации своего контента для Bing, вам следует начать с рассмотрения различий между сайтами с самым высоким рейтингом и фрагментами функций. Их платформа определяет приоритеты контента иначе, чем Google, и эти различия помогут вам понять, почему.

Алгоритм поиска DuckDuckGo

DuckDuckGo немного отличается от рынка поисковых систем, но он движется вперед как поисковая машина для всех, кто обеспокоен конфиденциальностью своих данных. Хотя у них есть собственный веб-сканер DuckDuckBot для сканирования содержимого веб-страницы, большая часть информации, которую DuckDuckGo отображает на своей странице результатов, собрана из более чем 400 дополнительных сторонних источников, включая Bing, Yahoo и Wikipedia. .

В отличие от Google и Bing, DuckDuckGo не собирает личную информацию о своих пользователях, включая историю поиска и IP-адрес. Эта приверженность конфиденциальности каким-то образом заставляет их алгоритм работать с большей нагрузкой, чтобы обеспечить персонализированные результаты.

Для дополнительной конфиденциальности DuckDuckGo также можно использовать для полностью анонимного просмотра, используя сеть Tor или луковую службу.

В результате такого акцента на конфиденциальности DuckDuckGo имеет наиболее оптимизированную страницу результатов.

Мгновенный ответ от DuckDuckGo

Информация в нашем примере взята непосредственно из Википедии.

DuckDuckGo не предоставляет конкретной информации о различных типах факторов ранжирования, которые включены в эти страницы результатов, но ссылается на тот факт, что ссылки на сайты с хорошим авторитетом – это то, что нужно учитывать.

Еще один интересный аспект платформы DuckDuckGo заключается в том, что они позволяют пользователям использовать настраиваемые параметры, называемые взрывами, для полного обхода страницы результатов поиска. Используя данные из нескольких источников для отображения результатов, DuckDuckGo действует как поисковый портал для таких платформ, как Википедия, Amazon и Twitter.

В качестве платформы, заботящейся о безопасности, мы можем предположить, что DuckDuckGo не включает прошлые поисковые запросы как часть своего алгоритма ранжирования. Это, в сочетании с информационными аспектами дополнительных источников, создает платформу, которая менее персонализирована, чем Bing или Google, но все же может предоставлять актуальный и качественный контент для своих пользователей. Пользовательский контент для Bing также будет работать на этой платформе.

Алгоритм поиска YouTube

YouTube – самый популярный сайт видеохостинга. Его поисковая система эффективно работает по правилам, аналогичным правилам Google, владеющего платформой, и фокусируется на ключевых словах и релевантности. Алгоритм разделен на две отдельные функции: ранжировать видео в поиске и показывать соответствующие рекомендации.

Конкретные причины, по которым одни видео имеют более высокий рейтинг, чем другие, как и все ресурсы Google, не определяются извне. При этом большинство интерпретаций склоняется к новизне видео, и частота загрузки канала является наиболее важным фактором.

Что касается рекомендаций, в этом исследовании 2016 года перечислены главные приоритеты YouTube, такие как масштаб, свежесть и шум:

• Масштаб: Каждую минуту на YouTube загружается 300 часов видео, а у платформы около 1,3 миллиарда пользователей. Это значительно усложняет анализ данных, поэтому основное внимание в алгоритме уделяется поиску способов изучения этого объема данных для каждого пользователя.
• Свежесть: YouTube балансирует то, как они рекомендуют видео, в зависимости от того, как недавно было загружено видео, а также на прошлое поведение отдельного пользователя.
• Шум: Из-за переменного объема контента, который большинство пользователей просматривают на YouTube, любому ИИ сложно проанализировать, что наиболее актуально в любой момент.

Эти факторы приводят к тому, что страница рекомендаций настраивается для каждой отдельной учетной записи пользователя.

Страница результатов поиска на YouTube в категории “Лучшие беспроводные наушники 2019 года”

Главный результат – самый просматриваемый ролик группы. Затем следует более новая загрузка с меньшим количеством просмотров, но с точным соответствием ключевому слову. У третьего видео больше просмотров, чем у второго, но оно не совсем соответствует ключевому слову; это также немного более старая нагрузка.

На основании этих результатов мы понимаем, что популярность, вероятно, является одним из наиболее важных факторов ранжирования YouTube, помимо новых видео с точным соответствием ключевому слову.

Чтобы занять хорошее место на YouTube, вам понадобится надежный профиль и постоянная частота загрузки. Его ориентация на популярность и силу профиля требует дополнительных инвестиций от маркетологов, но это окупается для брендов, которые сосредотачивают свои усилия на платформе.

Понимание того, как работают поисковые системы, помогает вам создавать лучший контент

Когда вы знаете, как разные платформы отображают свои результаты, проще создавать контент с потенциалом для хорошего ранжирования. Это понимание также поможет вам определить, почему другие типы контента имеют более высокий или низкий рейтинг, чем ваш.

На основе этой информации мы собрали пять советов, которые помогут вам создавать лучший контент на всех платформах:

• Важно понимать намерения пользователя. Каждая платформа, которую мы анализируем сегодня, определяет приоритеты контента в зависимости от того, насколько он релевантен поисковому запросу пользователя.
• Соответствующие ключевые слова помогут вам только на этом этапе. Включение релевантных ключевых слов в ваш контент поможет поисковым системам легче обнаруживать и индексировать ваш контент, но хороший рейтинг – это больше для предоставления ценности пользователям.
• Знайте, как ищет ваш целевой клиент. Соответствие ключевых слов и намерений требует глубокого понимания ваших клиентов и того, как они думают о вашем продукте и вашем рынке.
• Новый контент помогает повысить рейтинг. Создание нового контента или обновление существующего контента поможет вам подняться в рейтинге и повысит ваш авторитет как бренда.
• Получение авторизованных ссылок полезно. Чем больше людей ссылаются на вашу страницу, тем лучше она будет отображаться для поисковых систем. Это указывает на его ценность и актуальность для содержания каждой страницы, на которую вы ссылаетесь.

В конце концов, все сводится к пониманию вашего клиента. Вы не сможете создать контент, который будет хорошо ранжироваться, если не знаете, что люди ищут, когда ищут ваш продукт.

Дополнительные сведения о создании контента для поиска см. В нашем Руководстве по поисковой оптимизации.