Поисковая машина Яндекса отвечает на вопросы пользователей, находя нужные документы в интернете. А размеры современного интернета исчисляются в эксабайтах, то есть в миллиардах миллиардов байтов. Конечно же, Яндекс не обходит весь интернет каждый раз, когда ему задают вопрос. Поисковая система, так сказать, делает домашнее задание.

Поиск в интернете состоит из двух частей. Первая - поисковик обходит интернет, создавая его слепок на своих серверах. Вторая - пользователь задаёт запрос и получает ответ с серверов поисковика.

Яндекс ищет по поисковому индексу - базе данных, где для всех слов, которые есть на известных поиску сайтах, указано их местонахождение - адрес страницы и место на ней. Индекс можно сравнить с предметным указателем в книге или адресным справочником. В отличие от обычного предметного указателя, индекс содержит не только термины, а вообще все слова. А в отличие от адресного справочника, у каждого слова-адресата есть не одно, а очень много «мест прописки».

Подготовка к ответам

Подготовка данных, по которым ищет поисковая машина, называется индексированием. Специальная компьютерная система - поисковый робот - регулярно обходит интернет, выкачивает документы и обрабатывает их. Создается своего рода слепок интернета, который хранится на серверах поисковика и обновляется при каждом новом обходе.

У Яндекса два поисковых робота - основной и быстрый (он называется Orange). Основной робот индексирует интернет в целом, а Orange отвечает за то, чтобы в поиске можно было найти самые свежие документы, которые появились минуты или даже секунды назад. У каждого робота есть список адресов документов, которые нужно проиндексировать.

Когда при обходе робот видит на уже известных сайтах новые ссылки, он добавляет их в свой список, увеличивая количество индексируемых страниц. Впрочем, владелец сайта сам может помочь основному роботу Яндекса найти свой ресурс и подсказать, например, как часто обновляются его страницы - через сервис Яндекс.Вебмастер.

Сначала программа-планировщик выстраивает маршрут - очередность обхода документов. При этом планировщик учитывает важные для поисковой системы характеристики сайтов, такие как, например, цитируемость или частота обновления документов. После создания маршрута планировщик отдаёт его другой части поискового робота - «пауку». Паук регулярно обходит документы по заданному маршруту. Если сайт на месте, то есть работает и доступен, паук выкачивает запланированные в маршруте документы. Он определяет тип скачанного документа (html, pdf, swf и т.п.), кодировку и язык, а затем отправляет данные в хранилище.

Там программа разбирает документ по кирпичику: очищает от html-разметки, оставляя чистый текст, выделяет данные о местоположении каждого слова и добавляет их в индекс. Сам документ в исходном виде также остается в хранилище до следующего обхода. Благодаря этому пользователи могут найти в Яндексе и посмотреть документы, даже если сайт временно недоступен. Если сайт закрылся или документ был удалён или обновлён, Яндекс удалит копию со своих серверов или заменит её на новую.

Поисковый индекс, данные о типе документов, кодировке, языке и сохраненные копии документов вместе составляют поисковую базу. Она обновляется постоянно, но, чтобы это обновление стало доступно пользователям, её нужно перенести на «базовый поиск». Базовый поиск - сервера, которые отвечают пользователям на запросы. Туда переносится не вся поисковая база, а только её полезная часть - без спама, дубликатов сайтов (зеркал) и других ненужных документов.

Обновление поисковой базы из хранилища основного робота попадает в поиск «пакетами» - раз в несколько дней. Этот процесс создаёт дополнительную нагрузку на сервера, поэтому производится ночью, когда к Яндексу обращаются на порядок меньше пользователей. Сначала новые части базы помещаются рядом с такими же частями из прошлого обхода. Затем они проверяются по целому ряду факторов, чтобы обновление не ухудшило качество поиска. Если проверка прошла успешно, новая часть базы заменяет собой старую.

Робот Orange предназначен для поиска в реальном времени. Его планировщик и паук настроены так, чтобы находить новые документы и выбирать из огромного их количества все, хоть сколько-нибудь интересные. Каждый такой документ Orange сразу обрабатывает и выкладывает на базовый поиск. Срочных документов не очень много по сравнению с общим объемом интернета, поэтому обновление базы в реальном времени можно делать и при дневных нагрузках на сервера.

Всем привет, друзья!
Так как у меня есть время, то начал писать практически каждый день. И в сегодняшней статье вы узнаете о том, что такое апдейт, какие есть виды апдейтов и где их можно посмотреть. Если вы новичок и совсем недавно создали свой первый сайт, то вам эту статью будет полезно почитать.

Апдейт – это обновление базы поисковиков. Апдейт еще называют апом или на английском update. Существуют несколько видов апдейтов:

• Текстовый апдейт;
• Ссылочный апдейт;
• Апдейт Тиц;
• Апдейт PR;
• Апдейт Яндекс.Каталога;
• Апдейт поведенческих факторов;
• Апдейт поисковой базы картинок;
• Апдейт зеркальщика;
• Апдейт фавиконов;
• Обновление поискового алгоритма.

Текстовый апдейт - учитываются все внутренние изменения, которые были найдены поисковым роботом в интернете.

Например, вы написали новую статью на своем сайте под определенный поисковый запрос. Робот в любой момент может зайти на ваш ресурс и проиндексировать новый пост, но позиции сайта по этому запросу сразу же не изменятся. Они могут изменится только после текстового апдейта. То есть при таком обновлении учитываются все изменения, которые были сделаны вами внутри сайта. Текстовый update существует только для Яндекса. Что касается Гугла, то там обновления происходят очень часто и их никто даже не отслеживает.

Ссылочный апдейт – несложно догадаться, что происходит обновление ссылок:smile:. Например, вы решили купить несколько линков на свой ресурс. Не думайте, что на следующий день позиции сайта резко поднимутся вверх. Нет. Они могут измениться только после ссылочного апдейта. Многие новички этого не понимают, и каждый день проверяют позиции. Для того, чтобы ссылка начала работать, нужно, чтобы прошел хотя бы месяц.

Апдейт Тиц – при обновлении учитываются поисковой системой Яндекс все внешние ссылки. На основе их количества и качества сайту присваивается тематический индекс цитирования.

Update Тиц происходит примерно раз в два месяца. Где его посмотреть я напишу немного позже. Кстати, можете прочитать две статьи, которые я писал ранее: « ?» и « ?» Сегодня как раз апдейт Тиц и мой блог получил первую десятку:smile:.

Апдейт PR . Здесь примерно все, то же самое что и в предыдущем случаи, только Тиц присваивается Яндексом и целому сайту, а PR Гуглом и каждой странице отдельно.

Вообще PR – это довольно таки странный показатель и при покупке ссылок я не обращаю на него внимания. Во-первых, он очень редко обновляется (примерно раз в полгода), а во-вторых, как-то нечестно присваивается этот показатель. В молодых сайтов после первого апа PR может выстрелить 4, а у авторитетных ресурсов, с приличной ссылочной массой, так и остаться 0.

Обновление Яндекс Каталога. Существует Каталог, где, по мнению Яндекса, присутствуют самые качественные ресурсы Рунета. Туда можно попасть как бесплатно (но очень сложно), как и платно за 15 000 рублей.

Обновление каталога происходит очень часто, в среднем 1 раз в два дня. Не сложно догадаться, что во время update некоторые сайты попадают в этот каталог, некоторые выпадают. Не понимаю, зачем так часто его обновлять? Лучше бы Тиц обновлялся хотя бы раз в неделю:smile:.

Апдейт поведенческих факторов. – это то, как ведет себя пользователь на блоге. К ним можно отнести в выдаче, количество просмотренных страниц, время прибывание на сайте и т. д. Если, например, на вашем ресурсе улучшаться поведенческие факторы, то рост позиций вы можете заметить только после update.

Обновление поисковой базы картинок. Дело в том, что в поисковиках существует специальный робот, который отвечает за индексацию изображений. Поэтому выдача по картинкам изменяется только после специального апа. Для того чтобы узнать, какие картинки вашего ресурса уже проиндексированы поисковиками, достаточно ввести в поиске по картинкам такой адрес:
site:сайт
Он работает как для Яндекса так и для Гугла.

Апдейт зеркальщика. Каждый ресурс должен иметь главное зеркало сайта с www или без. Его можно указать в файле robots.txt, в панелях для вебмастеров и с помощью 301 редиректа. Кстати, последний способ самый надежный. Так вот, существует специальный робот, который отвечает за главное зеркало. И даже если вы смените главное зеркало своего ресурса, склейка произойдет только после update.

Так, вот, даже если вы и сделаете фавикон для своего ресурса, но в выдаче Яндекса он появится только после update.

Обновление поискового алгоритма. Иногда случается такое, что поисковые системы вносят изменения в свои алгоритмы. Например, они могут додать или убрать какой-нибудь фактор ранжирования, а могут просто послабить его влияние на выдачу. После обновления алгоритмов, как правило, существенно изменяется выдача. Таким образом, некоторые ресурсы проседают в низ, некоторые наоборот выстреливают. Если на вашем сайте резко упала или увеличилась посещаемость с какой-нибудь поисковой системы, то вполне возможно, что поменялись алгоритмы.

Что такое апдейт и какие они бывают, думаю, понятно, переходим к следующему вопросу.

Где отслеживать update

На сайте tools.promosite.ru предоставлена информация по апам, можно даже посмотреть update поведенческих факторов, чего я не наблюдал на предыдущих ресурсах.

Если ваш блог добавлен в Яндекс Вебмастер, то вы можете указать в настройках, чтобы вам на почту приходило сообщение после апов:

На этом все! Теперь вы знаете, что такое апдейт Яндекса и как его проверить. Удачи вам, друзья!

Для многих оптимизаторов апдейты Яндекса являются самыми ожидаемыми . После нахождения поисковиком новых текстов и ссылок, занесения их в базу данных, а также учтя различные факторы, согласно каких ранжируются проекты, приходит тот желаемый и долгожданный апдейт выдачи, говоря простым языком изменения позиций сайтов в поисковой выдаче.

Существуют также и другие виды апдейтов поисковых систем.

После апдейта выдачи могут изменится, или меняются позиции сайтов в поисковой выдаче, по результатам изменения ранжирования проектов системой поиска.

Насколько часто происходит этот апдейт, сказать сложно. Обычно это случается 1-2 раза в неделю. Но необходимо знать и помнить, что позиция сайта может меняться и между апдейтами Яндекса, хотя такие изменения незначительные.

Если после апдейта позиции вашего проекта поднялись, значит, вы идете правильным путем и можете продолжать работу в таком же духе. Но если позиции «пошатнулись», то это уже тревожный сигнал, который говорит об ошибочных действиях и вероятно на каком-то этапе были допущены ошибки в оптимизации ресурса.

Случается порой даже так, что после очередного апдейта Яндекса из поиска могут выпасть все страницы ресурса, но потом они вновь занимают свои места.

Текстовый апдейт обычно бывает один или два раза за семь дней, и происходит обновление базы данных о новых текстовых наполнениях страниц на различных ресурсах. Во время Апа в поисковой выдаче Yandex появляется новый текстовый контент, который был проиндексирован некоторое время назад.

Меняются позиции, связанные с появлением новых текстовых документов, и помимо этого выполняются технические изменения (закрываются дубли, присваивается регион, оптимизируются страницы и т.д.).

Ссылочный апдейт происходит одновременно с текстовым, но с интервалом до трех часов, обновляются данные обо всех новых ссылках, которые ведут на ваш проект.

Во время этого Апа происходит изменение позиций ресурсов в поисковой выдаче Яндекса, которые обуславливаются появлением новых ссылок, а также переучетом ссылочной массы, которая была поставлена ранее.

Апдейт ТИЦ

При этом апдейте пересчитывается тематический индекс цитирования проектов, который обусловлен изменением числа источников ссылающихся на ваш ресурс. Показатель ТИЦ обычно меняется не чаще, чем один раз в два месяца.

Необходимо сказать, что апдейт ТИЦ бывает кнопочным и тулбарным . В принципе, они происходят почти одновременно. Вначале обновлению подвергается кнопочный ТИЦ, а затем происходит обновление и тулбарного. Поэтому время Апа может продлиться от одного часа до 24-х часов. Кнопочный ТИЦ, поэтому является более точным, благодаря этому именно его значение отображено в .

Кнопочный ТИЦ – это, по сути, кнопка в виде так сказать "денежки" (которую можно получить у Яндекса) и которую вы можете часто встретить на многих ресурсах. Или можно установить на сайт сразу . Тулбарный же ТИЦ отображается обычно в , такое расширение можно установить по желанию в свой браузер.

Апдейт ТИЦ может происходить стабильно раз в месяц или его можно ждать порядка двух с лишним месяцев. Но бывает и так, хотя редко, что он происходит пару раз за две недели. Остается пока тайной, такая периодичность этого Апа. Разве что она известна сотрудникам Яндекса.

Излишнюю частоту либо долгие перерывы обычно связывают с обновлением и тестированием новых алгоритмов Yandex. Во время таких тестирований позиции ресурсов по продвигаемым запросам могут довольно сильно прыгать и существенно меняться. Но не стоит беспокоиться, после «такой бури» (тестирования) обычно позиции возвращаются на свои места.

Вот поэтому, перед тем как пройдет очередной апдейт ТИЦ, на биржах ссылок наступает затишье. Затем после прохождения апдейта и получением сайтов новых значений ТИЦ, на биржах вновь активируется движение и происходит корректировка web-мастерами цен на обычные и .

Точные и правильные апдейты Яндекса

Определять точные апдейты Яндекса умеют многие сервисы. Можно выделить, например, tools.promosite.ru или seobudget.ru/updates. Они также предлагают свой календарь апдейтов и возможность уведомления о наступившем Апе на Email или по SMS.

Правильные апдейты Yandex вам может показать сама поисковая система. Достаточно настроить получение сообщений в Яндекс.Вебмастер. Содержание будет примерно следующее: "Произошло обновление поисковой базы Яндекса" и указана дата.

К сожалению, сообщение приходит уже после Апа, но за то вы точно можете быть уверены в правильности апдейта и смело проверять позиции сайта.

Апдейты Google

Апдейты Гугла происходят настолько часто (в принципе, ежедневно), что оптимизаторы не отслеживают позиции сайта в Google «от Апа до Апа», а ежедневно их проверяют. Во время таких апдейтов выдачи Google одновременно учитываются ссылочные и текстовые изменения на продвигаемом ресурсе.

Апдейт PR представляет собой пересчет значения авторитета документа. После такого Апа для каждой страницы сайта присваивается новое значение Page Rank.

Когда происходит пересчет PR, учитываются все изменения, произошедшие в количестве и качестве ссылок ведущих на данный документ. Апдейты Page Rank обычно происходят один раз в три, четыре месяца, хотя параметры пересчитываются постоянно.

Любой специалист в области SEO скажет вам, что ему никогда не бывает скучно. Даже если сегодня сайт достиг высот в результатах поиска, то завтра он может легко оттуда вылететь. А всему виной злополучные апдейты Яндекса!

Апдейты поисковых систем

По мнению многих специалистов в области SEO , продвижение сайта в поисковых системах похоже на вечные, никогда не заканчивающиеся «веселые старты ». Даже в праздники, когда все люди отдыхают эти «бесчеловечные » поисковики постоянно обновляют результаты ранжирования.

Поэтому и приходится усталым специалистам по SEO и хозяевам интернет-ресурсов не спать, а «молиться » великому поисковику, чтобы он не выкинул их сайты с вершины выдачи. Все это происходит благодаря апдейтам Яндекса:

Под апдейтом в SEO принято понимать обновление баз данных поисковой системы путем включения в нее новых элементов (новых или обновленных веб-страниц ). Это приводит не только к добавлению, но и к «пересортировке » ресурсов в поисковой выдаче. То есть происходит обновление кэша поисковика. Именно благодаря этому меняются результаты индексирования сайтов.

То есть, если сегодня ваш сайт был в первой десятке поисковой выдачи, то после апдейта поисковика он может оттуда вылететь.

Поисковые роботы постоянно «шерстят » просторы интернета в поисках новых и обновленных сайтов или страниц. Все новые элементы и изменения в старых они фиксируют в своем кэше. Затем в определенный момент происходит обновление базы данных поисковой системы и, как следствие, очередное ранжирование.

Элементы, которые обновляются:

• Новые ссылки;
• Новый контент (текстовый );
• Изменения на уже проиндексированных страницах.

Особенности апдейта в Яндексе

Апдейты Гугла проходят часто, а поэтому не являются чем-то неожиданным. Намного сложнее обстоит с обновлением базы данных Яндекса. При апдейте этой поисковой системы учитывается сразу несколько параметров.

Поэтому «обновление поисковика » можно разделить на несколько фаз:

• Обновление данных о текстовом содержимом веб-страниц – этот этап называется текстовый апдейт;
• Обновление данных о ссылочном содержимом – учитываются все новые ссылки и обновления старых, которые расположены на страницах индексируемых сайтов.

Чаще всего обе фазы обновления (текстовый и ссылочный апдейт ) происходят одновременно. Но это не значит, что размещенная вчера ночью статья уже сегодня будет включена в результаты поиска. Все немного сложнее. Если верить статистике, то период между двумя обновлениями Яндекса составляют от 3 до 10 суток.

Но такие ограничения накладываются не на все виды интернет-ресурсов. Ежедневно обновляются базы Яндекса, касающиеся новостных ресурсов и блогов. А также все те сайты, которые часто размещают новые материалы и комментируются. Остальным ресурсам остается лишь ждать очередного глобального апдейта.

Остальные виды апдейтов Яндекса

• Апдейт выдачи – обновление результатов выдачи поисковой системы. То есть происходит изменение позиций сайтов. Является окончательным этапом процесса ранжирования. Апдейт выдачи наступает после того, как поисковым роботом собраны все данные о новых и измененных ссылках, текстовом контенте ресурсов, и занесены в базу данных поисковой системы. На основании этой информации происходит формирование списка результатов поиска, который выдается в ответ на пользовательский запрос. Обновление списка происходит не так часто (в среднем раз в месяц ). Но предсказать его точную дату невозможно.

Для обозначения степени изменений произошедших в поисковой выдаче используется термин «шторм ». Он показывает степень изменения поисковой выдачи в процентном соотношении относительно предыдущего списка. Сильным считается апдейт поисковой выдачи в 25-40%.

Если показатели шторма превышают 40%, то можно говорить о смене алгоритма формирования списка результатов поиска (ранжирования).

• Апдейт тематического индекса цитирования (ТИЦ ) – самый долгожданный для тех, кто зарабатывает на продаже ссылок. Происходит «переоценка» тематических ссылок, которые ведут на ваш ресурс. Негласно апдейт ТИЦ делят на два этапа: кнопочный и тулбарный.

Под кнопочным подразумевают изменение показателей ТИЦ на кнопке индекса цитирования от Яндекса. Он является наиболее точным и происходит в первую очередь:

Тулбарный апдейт ТИЦ – это изменение показаний параметра в панели инструментов для браузера от Яндекса. Он наступает позже, чем кнопочный апдейт.

В Google аналогом ТИЦ является PageRank (PR ). Но в отличие от ТИЦ обновление PR происходит намного реже. Поэтому он показывает популярность ресурса (веб-страницы ) в реальный момент времени не совсем точно.

Когда Яндекс проведет следующий апдейт?

После первого обновления Яндекс запоминает новый контент. Если после второго в нем не произошло серьезных изменений, то текст попадает в результаты поисковой выдачи. На скорость текстового апдейта также влияет объем нового материала и сложность структуры конкретного сайта.

Чем больше по объему новые материалы и чем сложнее структура построения конкретного ресурса, тем больше времени займет процесс переиндексации.

Немного проще обстоит дело с предсказанием следующего обновления ТИЦ. Предполагается, что значение общего ТИЦ всех ресурсов в Яндексе является точной величиной, и почти не изменяется. Поэтому при апдейте ТИЦ идет лишь его перераспределение. Происходит оно 1-2 раза в 30-60 дней.

Как видите, точно сказать, когда Яндекс сделает очередной апдейт, не может никто. Но предположительно это можно предсказать путем анализа дат предыдущих обновлений. Для этого можно воспользоваться специализированными сервисами:

• seobudget.ru – на сайте в виде таблицы представлены точные даты апдейтов Яндекса за предыдущие периоды. А внизу приводятся даты предполагаемых обновлений сразу по двум наиболее популярным поисковым системам:

• tools.promosite.ru – еще один сервис. Отличается большим количеством аналитических данных по обновлениям, представленных в виде графиков. Кроме того данный ресурс может похвастаться самой точной системой информирования об апдейтах Яндекса. Проверка происходит с частотой раз в 3 минуты!

Сводится к тому, что сначала робот-паук заходит на сайты интернета и скачивает просмотренные страницы в свою базу, затем в ней происходит индексирование (присваивается «важность каждой страницы) и по соответствующему алгоритму полученная информация структурируется.

Важно понять, что когда пользователь набирает запрос, то ответ на него поисковая машина ищет не по всему интернету, а только в своей базе, которую собрал робот-паук.

Поисковая машина ищет документы, т.е. веб-страницы в пределах своей собранной базы данных. В какой-то момент индексирующая программа принимает решение на формирование новой базы данных (т.е. появилась новая информация и её надо структурировать — новые страницы, новые тексты, новые ссылки). Старая база заменяется на новую – это и есть апдейт Яндекса. Апдейт (от английского update – обновление) также называют просто «ап».

У поисковика также, кроме основного робота-паука, есть, так называемый «быстро-робот», который создает базу, которая обновляется несколько раз в сутки. Этот бысто-робот и заходит на ресурсы, которые быстро обновляются, например, часто комментируемые блоги.

Эта поисковая машина производит несколько видов апдейта.

Как и где узнать точные апдейты Яндекса

Я скорее не ошибусь, если скажу, что лучший сервис, где можно узнать самую последнюю информацию по этому вопросу это сервис .

Вот, сегодня 26.08 2015 года и что мы видим.

Последние апы были 8 , 10 и 25 августа. Рассмотрим, например, ап 25 августа. Поисковик выложил индекс по 9 августа, что означает, что 25 августа в поиске появятся только те документы, которые были опубликованы не позже 9-го. Т.е. если вы опубликовали статью 10 августа, то в поисковой выдаче 25-го её не будет -ждите следующего апа.

Апы поисковых машин можно также посмотреть на сервисе Если посмотреть, то данные здесь запаздывают (скриншот сделан 26 августа 2015 года).

Яндекс выдача

Рассмотрим ситуацию. Ваш блог занимает какие-то позиции в поисковой выдаче (по каждому запросу каждая страница блога имеет свое место в поисковой выдаче). А робот — паук в это время нашёл еще кучу аналогичных блогов по Вашей тематике, да ещё и с кучей хороших ссылок на них, и занёс все данные в базу. Теперь ситуация изменилась – Поисковик должен выложить лучший блог на высокие позиции в выдаче. Он заменяет старую базу на новую – производит ап, и Ваш блог становится ниже в поисковой выдаче. Т.о. после каждого апа изменяются позиции сайтов в поисковой выдаче. Периодичность апов выдачи этого поисковика приблизительно от 2 до 7 дней (а Google — практически каждый день).Вот и сравните какая поисковая система лучше!

Яндекс тИЦ

Яндекс пересчитывает каждого сайта, учитывая ссылки, ведущие на сайт и вес этих ссылок.

Посмотреть апы Тиц можно на этом же сервисе. Только нажмите на соответствующую ссылку.

Строго говоря, у Яндекса всё сложнее. Так различают текстовый апдейт Яндекса (учитываются тексты документов, найденные роботом), ссылочный апдейт (учёт найденных и «битых» ссылок в документах). Периодичность апдейтов Яндекса можно посмотреть на сайте. Кстати, здесь чётко видно, с какой временной задержкой происходит учёт, как текста, так и ссылок.

Различают также тулбарный и кнопочный апдейт тИЦ, но это уже тонкости, которые нужны ну очень крутым сеошникам.