Mногие испытывают трудности с индексацией, и не понимают, как...

Mногие испытывают трудности с индексацией, и не понимают, как работает система приоритетов, так что вот основные принципы:

В течение десятилетий Google не мог (или не хотел) индексировать все, что публикуется.

Системa приоритетa краулинга - это давно отработанная, надежная и масштабируемая система.

Каждый URL, о котором известно Google, попадает в очередь, и эта очередь представляет собой большую старую базу данных всех этих URL, отсортированных в порядке алгоритмически определенного приоритета.

Каждый новый обнаруженный URL может быть добавлен в эту очередь, и он мгновенно "переходит" в очередь с присвоенным ему приоритетом.

Это делает систему динамичной и масштабируемой - в каждый период времени боты Google могут работать как можно дальше вниз по списку приоритетных задач.

Точный приоритет, до которого он опускается, автоматически изменяется в зависимости от спроса.

В напряженные периоды обрабатываются только более приоритетные задачи.

В более спокойные периоды боты Google могут "догнать" некоторые URL с более низким приоритетом.

Кроме того, со временем URL, до которых еще не добрались, постепенно приобретают приоритет за то, что они уже давно ждут своего часа.

Чем больше и больше контента создается, тем больше задач в этом списке, и боты не добираются до низкоприоритетных позиций только потому, что высокоприоритетных позиций стало в два, 10, 100 раз больше, чем раньше.

По мере роста масштабов создания контента и увеличения количества URL-адресов, которые необходимо просмотреть, повышается приоритет любого элемента, чтобы "попасть в цель" в данный час, день, неделю, месяц и т.д.

Но высший приоритет все равно подхватывается практически мгновенно.

Что определяет приоритет?

"У меня есть новый блогпост и я хочу, чтобы он был проиндексирован" - это НЕ то, что Google рассматривает как сигнал приоритета.

Ссылки

Ссылки остаются сильным сигналом важности в соответствии с основами теории сетей, которая лежит в основе всего графа ссылок.

Спрос

Поиск по бренду, безусловно, является одной из форм спроса, но еще одним показателем является тенденция роста или падения самого запроса, а также другие сигналы, основанные на CTR, указывающие на то, что Google должен индексировать больше свежего контента в качестве приоритетного по конкретной теме или запросу.

Кроме того, на спрос влияет и то, много ли предложений уже есть у Google.

Написание миллионной статьи на тему HCU является для Google гораздо более низким приоритетом для индексации, чем первые тысячи, а они были ниже, чем первые 10.

Чтобы противостоять этому, нужны качественные сигналы.

Что насчет сервисов предлагающих популярные ключевики?

Да, проверьте, что Google уже проиндексировал, и есть ли спрос на свежесть, прежде чем тратить время на контент "Я тоже" с низким приоритетом для индексации.

Объем

По-видимому, существует буст приоритета, когда домен индексируется мало (дайте всем честную выборку), и наоборот, чем больше домен уже проиндексирован, тем более высокий приоритет может потребоваться, чтобы получить больше.

Чтобы компенсировать это, вам потребуется высокий спрос и ссылки.

Чтобы сайты были проиндексированы и прокраулен, он должны иметь достаточно высокий приоритет для данного цикла краулинга.

Ссылки и спрос - оба фактора, над которыми можно работать, сосредоточившись на качестве.

Количество - это недостаток, если только это количество не увеличивает объем ссылок и сигналов спроса.

Примечания

Во-первых, мгновенный краулинг не является обязательным.

Терпение - хорошая вещь.

НЕ попадайте в ловушку "принудительного" краулинга и индексации.

Понять, сколько времени требуется Google для краулинга и индексации, - это единственный способ узнать, насколько приоритетна ваша страница.

Скрывать проблемы, которые могут навредить вам в дальнейшем, - это игра в дурака.

Вместо этого, наблюдая за естественной индексацией, внимательно следите за тем, насколько приоритетным является краулинг для вашего контента и работайте над устранением базовых сигналов приоритета.

@MikeBlazerX

Источник новости https://t.me/mikeblazerx/2448...