Как работают поисковые системы?

  1. ползком
  2. индексирование
  3. Поиск и рейтинг
  4. Что дальше для поисковых систем?

Реклама

Статья обновлена ​​Джоэлем Ли 10.10.2017

Для многих Google - это интернет. Это отправная точка для поиска новых сайтов и, возможно, самое важное изобретение со времен самого Интернета. Без поисковых систем новый веб-контент был бы недоступен для масс.

Но знаете ли вы, как работают поисковые системы? Каждая поисковая система имеет три основные функции: сканирование (для обнаружения контента), индексирование (для отслеживания и хранения контента) и поиск (для извлечения релевантного контента, когда пользователи запрашивают поисковую систему).

ползком

Сканирование - это то, с чего все начинается: сбор данных о веб-сайте.

Это включает сканирование сайтов и сбор сведений о каждой странице: заголовки, изображения, ключевые слова, другие связанные страницы и т. Д. Разные сканеры могут также искать разные детали, например макеты страниц, где размещаются рекламные объявления, размещены ли ссылки и т. Д.

Но как сайт сканируется? Автоматический бот (так называемый «паук») посещает страницу за страницей как можно быстрее, используя ссылки на страницы, чтобы найти, куда идти дальше. Даже в самые ранние дни пауки Google могли читать несколько сотен страниц в секунду. В настоящее время это тысячи.

Когда веб-сканер посещает страницу, он собирает все ссылки на странице и добавляет их в свой список следующих страниц для посещения. Он переходит на следующую страницу в своем списке, собирает ссылки на этой странице и повторяет. Сканеры также время от времени возвращаются на прошлые страницы, чтобы увидеть, произошли ли какие-либо изменения.

Это означает, что любой сайт, связанный с проиндексированным сайтом, будет в конечном итоге сканироваться. Некоторые сайты сканируются чаще, а некоторые - на большую глубину, но иногда сканер может отказаться, если иерархия страниц сайта слишком сложна.

Один из способов понять, как работает веб-сканер, - это создать его самостоятельно. Мы написали учебник по создание базового веб-сканера на PHP так что проверьте это, если у вас есть опыт программирования.

Обратите внимание, что страницы могут быть помечены как «noindex», что похоже на просьбу поисковых систем пропустить индексацию. Неиндексированные части интернета известный как «глубокая паутина» Что такое глубокая паутина? Это важнее, чем вы думаете Что такое глубокая паутина? Это важнее, чем вы думаете Глубокая паутина и темная паутина звучат страшно и гнусно, но опасности были преувеличены. Вот что они на самом деле и как вы можете получить к ним доступ сами! Прочитайте больше и некоторые сайты, например, размещенные в сети TOR, не могут быть проиндексированы поисковыми системами. ( Что такое TOR и луковая маршрутизация? Что такое луковая маршрутизация? [MakeUseOf Объясняет] Что такое луковая маршрутизация? [MakeUseOf Объясняет] Интернет конфиденциальность. Анонимность была одной из величайших особенностей Интернета в молодости (или одной из худших особенностей, в зависимости от того, кого вы спрашиваете). Оставляя в стороне виды проблем, которые возникают ... Прочитайте больше )

индексирование

Индексирование - это когда данные из обхода обрабатываются и помещаются в базу данных.

Представьте себе, что вы составляете список всех ваших книг, их издателей, их авторов, их жанров, количества страниц и т. Д. Сканирование - это когда вы просматриваете каждую книгу, а индексирование - когда вы регистрируете их в своем списке.

А теперь представьте, что это не просто комната, полная книг, а каждая библиотека в мире. Это небольшая версия того, что делает Google, который хранит все эти данные в огромных центрах обработки данных с тысячи петабайтных дисков Объясненные размеры памяти: гигабайты, терабайты и петабайты в контексте Объясненные размеры памяти: гигабайты, терабайты и петабайты в контексте Легко видеть, что 500 ГБ - это больше, чем 100 ГБ. Но как сравнить разные размеры? Что такое гигабайт в терабайт? Где вписывается петабайт? Давайте разберемся! Прочитайте больше ,

Вот загляните в один из поисковых центров данных Google:

Кредит изображения: Google

Поиск и рейтинг

Поиск - это когда поисковая система обрабатывает ваш поисковый запрос и возвращает наиболее релевантные страницы, соответствующие вашему запросу.

Большинство поисковых систем дифференцируют себя с помощью своих методов поиска: они используют разные критерии, чтобы выбирать, какие страницы лучше всего соответствуют тому, что вы хотите найти. Вот почему результаты поиска различаются между Google и Bing, и почему Wolfram Alpha так уникально полезен 10 интересных применений Wolfram Alpha, если вы читаете и пишете на английском языке 10 интересных применений Wolfram Alpha, если вы читаете и пишете на английском языке Мне потребовалось некоторое время, чтобы обернуть голову вокруг Wolfram Alpha и запросов, которые он использует, чтобы высказать эти результаты. Вы должны погрузиться глубоко в Wolfram Alpha, чтобы действительно использовать его, чтобы ... Прочитайте больше ,

Алгоритмы ранжирования проверяют ваш поисковый запрос по миллиардам страниц, чтобы определить релевантность каждого из них. Компании защищают свои алгоритмы ранжирования как запатентованные отраслевые секреты из-за их сложности. Лучший алгоритм означает лучший опыт поиска.

Они также не хотят, чтобы веб-разработчики играли в систему и несправедливо поднимались на вершины результатов поиска. Если бы внутренняя методология поисковой системы когда-либо использовалась, все люди наверняка использовали бы эти знания в ущерб таким поисковикам, как вы и я.

Имиджевый кредит: фотовибы через Shutterstock

Использование поисковой системы, конечно, возможно, но теперь уже не так просто.

Первоначально поисковые системы ранжировали сайты по тому, как часто ключевые слова появлялись на странице, что приводило к «заполнению ключевых слов» - заполнению страниц бессмысленной чепухой.

Затем появилась концепция важности ссылок: поисковые системы оценивали сайты с большим количеством входящих ссылок, потому что они интерпретировали популярность сайта как релевантность. Но это привело к спаму ссылок во всем Интернете. В настоящее время поисковые системы весят ссылки в зависимости от «авторитета» сайта ссылок. Поисковые системы больше ценят ссылки из правительственного агентства, чем ссылки из каталога ссылок.

Сегодня алгоритмы ранжирования окутаны еще большим количеством загадок, чем когда-либо прежде, и «Поисковая оптимизация» Demystify SEO: 5 руководств по поисковой оптимизации, которые помогут вам начать Demystify SEO: 5 руководств по поисковой оптимизации, которые помогут вам начать Мастерство поисковой системы требует знаний, опыта и множества проб и ошибок. Вы можете начать изучать основы и легко избежать распространенных ошибок SEO с помощью многих руководств по SEO, доступных в Интернете. Прочитайте больше не так важно Хорошие рейтинги в поисковых системах теперь основаны на высококачественном контенте и отличном пользовательском опыте.

Что дальше для поисковых систем?

Ах, теперь есть интересный вопрос. Ответ - «семантика»: значение содержания страницы. Вы можете прочитать больше о в наш обзор семантической разметки и ее будущего воздействия Что такое семантическая разметка и как она изменит интернет навсегда [объясненная технология] Что такое семантическая разметка и как она изменит интернет навсегда [объясненная технология] Прочитайте больше ,

Но вот суть этого.

Прямо сейчас вы можете искать «безглютеновые куки», но результаты могут вернуть рецепты безглютеновых куки. Вместо этого вы можете найти обычные рецепты печенья с надписью «Этот рецепт не без глютена». У него правильные ключевые слова, но неправильное значение.

С помощью семантики вы можете искать рецепты печенья, а затем удалять определенные ингредиенты: муку, орехи и т. Д. Вы также можете сузить результаты до рецептов, время приготовления которых не превышает 30 минут, и просматривать оценки 4/5 или более. Это было бы круто, верно? Вот куда мы направляемся!

Все еще не понимаете, как работают поисковые системы? Посмотрите, как Google объясняет этот процесс:

Если вы нашли это интересным, вы также можете узнать о как работают поисковые системы изображений ,

Имидж Кредит: Приходов / Depositphotos

Узнайте больше о: Гугл Аналитика , Поиск Гугл , Поиск в интернете ,

Похожие

Основы SEO, часть 1: ваш сайт и поисковые системы
... чтобы ваш сайт отображался как можно выше в результатах поиска. Как работают поисковые системы? Чтобы понять, что вы можете сделать, чтобы вас нашли лучше, полезно, если вы знаете, как работают поисковые системы , Поисковые системы пытаются связать своих посетителей с наиболее интересным для них результатом. Для этого они используют специальные алгоритмы. Что такое алгоритмы поисковых систем
Как сделать ваш блог оптимизированным для поисковых систем
... систем. Поисковый трафик является одним из лучших на любом сайте / блоге. Дизайн - это то, с чего нужно начинать с SEO На сайте оптимизации , Прямо сейчас, вы можете не знать об этом, но ваш дизайн имеет большое влияние на ваш сайт SEO эффективность , Итак, вот список, предоставленный
Что такое мобильное SEO, как оптимизировать?
... для мобильных устройств; еще раз, полезно проанализировать вашу работу SEO, и что мы можем сделать с этим, является ответом на вопрос. Что такое мобильное SEO? Ваша мобильная SEO-конфигурация необходима для того, чтобы предоставить вам хороший опыт для того, чтобы охватить ваших целевых клиентов в нужное время и в нужном месте. Мобильное SEO-приложение; Чтобы оптимизировать рейтинг вашего сайта, размеры экрана - это своего рода фаза ранжирования сайта,
Как работают SEO системы для интернет-магазинов?
Кредит Фотографии: Бен Гейне через Compfight куб.см Чешский интернет-магазин решений. Есть тонны , Какой самый лучший? Я действительно не знаю. Но эта фраза, вероятно, будет идеальным ответом
Бизнес-совет: что такое технология NFC? Как это использовать?
«... В наше время аббревиатуры NFC здесь совсем немного, и если сможете, напишите подробную статью об этом ...» H. / 2016.10.30 / «...« Реально и надежно »платить за товары, покупать товары и скидки? Было бы неправильно пользоваться? Можете ли вы позвонить парням, занимающимся этими вещами?» D / 2016.09.04 / Многие запросы и неотвеченные запросы поступают непрочитанными, по электронной почте, через SMS и социальные сети. Многие из этих электронных писем и электронных писем, которые
Как оптимизировать сайт в Нигерии: как получить хороший рейтинг в Google
... чтобы узнать больше Также дышит на шею быстро растущие социальные сайты, такие как facebook которые косвенно предоставляют альтернативы Google (постоянно ходят слухи, что facebook строит свою социальную поисковую систему). Если Google не будет продолжать предоставлять то, все его существование движется к скользкому нисходящему спаду исчезновения Интернета.
Как контент-маркетинг и SEO создают успех в бизнесе в Интернете
... системами, прежде всего Google. Без рейтинга многие люди будут скучать по вашему контенту. Некоторые из этих людей могут хотеть то, что вы предлагаете. Правильное использование ключевых слов, высококачественного контента и соответствующих ссылок - все это важно для этого процесса. Вы никогда не должны использовать «
Как оптимизировать Youtube видео
... для конвертации клиентов или объяснения идей (хотя я тоже так делаю), я делаю больше видео с фрагментами контента на сайте и использую это видео для ранжирования Google, чтобы принести органический поиск (органический поисковый трафик). Почему видео так необычно. В настоящее время делать видео так же просто, как писать на страницах нашего блога или целевых страницах для SEO, но видео на Youtube имеют ряд преимуществ по сравнению с постами
КАК СДЕЛАТЬ БЛОГСПОТ ЛЕГКО
Опубликовано в 08: 05ч в дизайн , WEBDISIGN по adipro Простые способы сделать Blogspot ... Возможно, вы не понимаете, как создать блог, это из-за школьных заданий, которые требуют, чтобы у учеников был блог, чтобы они могли принимать участие в обучении и выполнять задания в своих блогах,
Как использовать современный пресс-релиз
Я узнал одну важную вещь о пресс-релизах. Хороший пресс-релиз - это не то, что побуждает журналиста написать статью; скорее, отличный пресс-релиз публикуется в виде статьи. Несмотря на то, что это может быть абстракцией за пределами самых ограниченных по времени репортеров, во многих случаях чем лучше будет ваш пресс-релиз, тем больше его
Как выбрать SEO агентство?
... что переделали сайт. Это новое Это красиво Я надеюсь, что вы будете оптимизированы для смартфонов и планшетов. Но у него небольшая проблема: никто этого не видит! Почему? Конечно, потому что вы не приняли во внимание то, как важно иметь сайт (и я надеюсь, что все вы читали, что это не что иное, как банальность!) SEO , Понять хороший сайт без эффективной SEO- деятельности - это все равно,

Комментарии

Как работают поисковые системы?
Как работают поисковые системы? Поисковые системы работают на автоматизированном механизме, основная задача которого состоит в том, чтобы сканировать сайты и индексировать их в поисковых системах со своими пауками. Доработаем механизм действия по следующим пунктам: Хранить и архивировать страницы в пользовательских базах данных.
Вы когда-нибудь останавливались и задавались вопросом, как работают поисковые системы?
Вы когда-нибудь останавливались и задавались вопросом, как работают поисковые системы? Как они решают, какие сайты попадают в первую строчку или в первую десятку? Чтобы получить общее представление о поисковой оптимизации ( SEO ), проверьте видео ниже: Мы предоставляем отслеживание и сравнение для прибыльных ключевых слов SEO для Лас-Вегаса
Цель поисковых систем (из которых Google является самым известным) заключается в следующем: как я могу дать своим клиентам то, что они просят?
Цель поисковых систем (из которых Google является самым известным) заключается в следующем: как я могу дать своим клиентам то, что они просят? Другими словами: как я могу предоставить актуальную и актуальную информацию о запрашиваемой теме. Текущий контент В любом случае, актуальный контент - это то, что ваш блог (или статья, новость, статья портфолио или то, что вы хотите назвать) очень подходит для. Если вы регулярно публикуете что-то новое на своем веб-сайте, то ваш
Мы все знаем, что сегодня Google является бесспорным лидером поисковых систем, но должны ли мы забыть о других поисковых системах?
Мы все знаем, что сегодня Google является бесспорным лидером поисковых систем, но должны ли мы забыть о других поисковых системах? Мы увидим это в этой статье и попытаемся проанализировать, может ли это быть вам интересно или нет. Доля рынка поисковых систем с февраля 2015 года по февраль 2016 года
Тем не менее, большой вопрос, который вы думаете на данный момент, должен заключаться в том, как вы можете подключиться к сфере представления поисковых систем?
Тем не менее, большой вопрос, который вы думаете на данный момент, должен заключаться в том, как вы можете подключиться к сфере представления поисковых систем? Ну, долгосрочное право SEO стратегия это, безусловно, хитрость для увеличения трафика вашего сайта. В то же время, одним из важных аспектов, который должен быть в вашем долгосрочном контрольном списке
Как ваша компания зарабатывает деньги и как «поиск» может помочь?
Как ваша компания зарабатывает деньги и как «поиск» может помочь? Какие еще каналы вы используете? Оффлайн реклама? Социальные сети? Кто ваши конкуренты? Что они хорошо делают в Интернете (и, возможно, в автономном режиме)? Если SEO-специалист не заинтересован в изучении вашей компании с комплексной точки зрения; тогда ищи в другом месте. Трудно обеспечить хороший SEO, не зная, каковы цели компании. Знать кое-что об их клиентах и ​​знать, какими могут быть
Если бы вы начали оптимизировать сайт для поисковых систем с нуля, что бы вы сделали?
Если бы вы начали оптимизировать сайт для поисковых систем с нуля, что бы вы сделали? Убедитесь, что настроенная вами структура поддерживает рост и гибкость, необходимые поисковой системе для обнаружения всех ваших страниц и важности этих страниц. Что вы думаете о Bing Challenge? Вы фанат Bing или команды Google? Я думаю, что это был очень креативный и хороший способ для Microsoft заставить людей задуматься об использовании Bing. Microsoft
Как поисковые системы ранжируют результаты?
Как поисковые системы ранжируют результаты? источник: Pixabay Большая часть интернет-трафика поступает из поисковых систем, включая Google, Bing и Yahoo. Хотя сайты социальных сетей играют важную роль в видимости вашего сайта, поисковые системы более важны
Знаете ли вы, как сделать оптимизацию для этих поисковых систем?
Знаете ли вы, как сделать оптимизацию для этих поисковых систем? Как вы видите, что SEO в Италии сильно отличается от работы за границей? И вы, если у вас есть опыт, сколько различий вы заметили?
А как насчет Google SERP - что вы думаете о том, как это может измениться?
А как насчет Google SERP - что вы думаете о том, как это может измениться? Как Google будет определять авторитетный и релевантный контент в 2020 году? Какие показатели поведения пользователей может измерять Google в 2020 году? Как могут результаты органического поиска отображаться в 2020 году и как они будут интегрироваться с платным поиском? Как ИИ изменит SEO? Как вы думаете, отрицательный SEO может развиваться? Будем ли мы лучше
Как контент отображается по-разному для пользователей и поисковых систем?
Как контент отображается по-разному для пользователей и поисковых систем? Вы знаете, что в мире Интернета каждое интернет-устройство (например, компьютер, мобильный телефон, планшет и т. Д.) Идентифицируется по IP-адресу. Используя маскировку, контент доставляется на основе IP-адресов или HTTP-заголовка User-Agent пользователя, запрашивающего страницу. Маскировка осуществляется путем изменения файла с именем .htaccess. Сервер Apache имеет модуль под названием «mod_rewrite». С помощью этого модуля

Но знаете ли вы, как работают поисковые системы?
Но как сайт сканируется?
Неиндексированные части интернета известный как «глубокая паутина» Что такое глубокая паутина?
Это важнее, чем вы думаете Что такое глубокая паутина?
Что такое TOR и луковая маршрутизация?
Что такое луковая маршрутизация?
Но как сравнить разные размеры?
Что такое гигабайт в терабайт?
Где вписывается петабайт?
Что дальше для поисковых систем?