Noindex и nofollow в чем разница: что это значит, в чем разница и как правильно их использовать

Содержание

что это значит, в чем разница и как правильно их использовать

Есть проблемы с ранжированием, проект не растет, хотите проверить работу своих специалистов по продвижению? Закажите профессиональный аудит в Семантике

Получи нашу книгу «Контент-маркетинг в социальных сетях: Как засесть в голову подписчиков и влюбить их в свой бренд».

Подпишись на рассылку и получи книгу в подарок!

Больше видео на нашем канале — изучайте интернет-маркетинг с SEMANTICA

В чем отличие между noindex и nofollow

Первое существенное отличие их в том, что первый был виден ранее для Google, а второй — только для Яндекса и Rambler. В настоящее время Яндекс также научился распознавать Ноуфоллоу, который работает только для ссылок, а Ноуиндекс — для любого кода сайта.

Применение Nofollow не превращает ссылку в невидимую, а всего лишь указывает, что по ней не нужно идти и индексировать документ, на который она ведет. Поисковый робот индексирует эту гиперссылку, но вес с сайта не передается, если она ведет на чужой ресурс. Работает этот атрибут для всех поисковиков.

Что касается тега Noindex, то с ним работает только Яндекс. Гугл же просто проигнорирует его. Использовать его нужно в тех случаях, когда вы хотите закрыть какой-то участок страницы — текст, картинку или ссылку — от индексации. Поисковик контент распознает, но впоследствии выкидывает из индекса. Эта мера установлена для полного анализа страницы и процедуры наложения возможных санкций за нарушения.

Для чего нужен Noindex

  • Закрывается ненужная/неуникальная информация, что улучшает релевантность страницы, потому что увеличивается плотность ключевых фраз, соответствие тематике, уникальность.
  • Прячутся сквозные блоки и гиперссылки, наличие которых может приводить к пессимизации.
  • Скрывается личная и служебная информация, если вы не хотите, чтобы она легко находилась через поиск.

Для чего нужен Nofollow

  • Закрытие лишних веб-ссылок.
  • Сохранение веса страницы неизменным.
  • Распределение определенного веса по ссылкам.

Как использовать noindex и nofollow

Тэг Noindex для любого контента применяется так:

текст, который надо скрыть <a href=”ссылка куда-то”>, и еще</a> текст</noindex>.

Весь текст и анкор ссылки изначально индексируются, но потом удаляются из базы поисковика. Гиперссылка индексируется, и вес по ней передается.

При работе с Ноиндекс существует вероятность того, что снизится валидность кода, так как данный тэг знает только российский поисковик. Поэтому рекомендуется следующий вариант написания:

<!—Noindex—> Весь текст, который надо скрыть  <!—/noindex—>.

Весь текст, который надо скрыть .

При этом другие поисковики просто его пропустят, и валидность кода останется неизменной.

Атрибут Nofollow для ссылок применяется

<a href=”веб-ссылка куда-то” rel=”nofollow”> анкор </a>

При этом анкор попадает в индекс, но поисковик по веб-ссылке не идет, вес на странице остается.

Если на странице слишком много Нофоллоу, то это может негативно сказаться на лояльности поисковиков.

Совместное использование

Для того чтобы закрыть и текстовую часть, и гиперссылку, следует придерживаться такого написания:

<!—Noindex—> Весь текст, который надо скрыть  <a href=”веб-ссылка куда-то” rel=”nofollow”> анкор </a>, и еще текст <!—/noindex—>

Варианты правильного использования Noindex и Nofollow для запрета индексации документа в целом

Тег и атрибут, все время ходят “за ручку”, и часто их применяют вместе. Они могут применяться в meta name=robots документа для указания рекомендаций по его индексации и переходу по веб-ссылкам. Указание на запрет индексации необходимо, если обнаружены дубли страниц, Или в сети появилась конфиденциальная или устаревшая информация, а другим способом страницы убрать нельзя.

В случае, если вы хотите закрыть всю страницу от индексации и запретить учет располагающихся на ней ссылок, необходимо указать в метаданных страницы — следующее:

Ноуиндекс создает команду Яндексу не индексировать контент на странице, но робот ходит по ее веб-ссылкам. Поэтому дополнительный Ноуфоллоу указывает по ним на не ходить. Данное указание воспринимают как Яндекс, так и Google.

Что касается удаления документа из индекса Google, то поисковиком предусмотрен альтернативный метод: запись X-Robots-Tag: noindex, nofollow. Данное указание закрепляется в http-заголовках, не видимых в коде страницы.

Рассказываем о разнице между Nofollow и Noindex, как их правильно использовать для ссылок и скрытия контента на сайте.

Всегда следите за наличием рассмотренных в статье тегов и атрибутов в нужных местах, чтобы получать именно тот результат, которого вы ожидаете.

Какая разница между тегами nofollow и noindex? — SEO

Выясняем, как работают тег noindex и атрибут nofollow. Подробно рассмотрим сценарии использования и узнаем, как прописывать теги для роботов в зависимости от поставленных задач.

Теги и атрибуты

Их еще называют дескрипторами. Это элементы разметки, с помощью которых объектам в текстовом документе придаются определенные свойства. Эти свойства зависят от языка разметки и поставленных задач. Сделать шрифт жирным, превратить кусок текста в гиперссылку или задать ей специфичные визуальные характеристики…

Но есть теги, которые выполняют несколько иные функции. В их числе nofollow и noindex. В любых своих проявлениях они никак внешне не влияют на текст и ссылки. Посетитель сайта не заметит, если часть страницы обведут в тег или пометят атрибутом nofollow. Текст будет выглядеть без изменений.

Изменения произойдут на технической стороне. Отличия заметит поисковой робот, анализирующий и индексирующий веб-страницы.

Что такое noindex

«Ноиндекс» – тег и атрибут HTML-страницы. Можно пометить им страницу целиком, придав ей определенные свойства, либо выбрать отдельный участок кода и применить атрибут к нему.

Функция noindex заключается в «сокрытии» контента от поисковых роботов, машин, анализирующих и индексирующих веб-сайты. Они собирают базу данных для поисковых служб и предоставляют пользователям релевантные результаты поиска.

Если какая-то часть контента на странице помечена тегом noindex, то робот ее проигнорирует и в поиске она учтена не будет, что прямо повлияет на SEO-продвижение ресурса, на котором были произведены соответствующие изменения.

На самом деле, робот, конечно же, посмотрит все, что есть на сайте. Просто не будет заносить это в индексную базу.

Какой контент помечается этим тегом?

Любой. В зависимости от помеченной информации и поискового робота тег будет восприниматься по-разному.

Обычно в noindex заворачивают четыре типа текстового контента:

  1. Информацию с низкой уникальностью, чтобы избежать проблем с антиплагиатом.
  2. Коды счетчиков (типа метрики и других аналитических систем), ненужные поисковику.
  3. Контактные данные, номера и ссылки, которые не стоило бы показывать в поисковой выдаче.
  4. Постоянно меняющийся текст, индексация которого не принесет никакой пользы.

Как использовать тег?

Тег можно вставить в <head> страницы как мету (атрибутом), увеличив область его действия на всю страницу.

С таким кодом индексация страницы разрешается:

<meta name="robots" content="index"/> 

А с таким индексация запрещается:

<meta name="robots" content="noindex"/> 

Такое правило можно указать для конкретного робота. Например, поискового бота Google:

<meta name="googlebot" content="noindex"/>

Еще один способ — встраивание тегов в текст и оборачивание в него ссылок.

<noindex>кусок текста, который хотелось бы скрыть от индексации поисковиками</noindex>

Правда, такая разметка может нагородить ошибок из-за того, что многие поисковики не понимают тег <noindex> и считают его наличие в тексте ошибкой. Поэтому приходится исползать его вариацию <!–noindex–>. В таком виде роботы, понимающие тег, считывают его без проблем и задают нужные свойства, а непонимающие попросту игнорируют.

Независимо от типа скрываемого контента, принцип остается тем же. Поэтому, если нужно скрыть от индексации код счетчика, ничего специфичного делать не придется. Так же оборачиваем его в <noindex> и все.

Что такое nofollow

Атрибут, вставляющийся перед ссылками и запрещающий по ним переходить. 

Вес страницы — это своего рода уровень авторитетности сайтов, один из факторов, учитываемых при ранжировании страниц в поисковых запросах. Чтобы не передавать вес страницы другим сайтам по размещенным на них ссылкам, данные ссылки оборачивают в тег nofollow.

Какой контент помечается этим атрибутом?

Ссылки. Но не все ссылки, а те, что могут как-то негативно повлиять на вес ресурса. Это касается автоматических ссылок, появляющихся в тех или иных участках сайта. Атрибут nofollow стоило бы приписывать любым внешним ссылкам, за которые вы не можете ручаться. Добавленные на ресурс другими пользователями через секцию комментариев или в графу профиля БИО.

Как прописывать тег?

С таким тегом индексирование страницы разрешается, но запрещается переход по всем ссылкам:

<meta name="robots" content="nofollow"/>

Как и в случае с <noindex>, правило можно задать для конкретного поискового робота:

<meta name="googlebot" content="nofollow"/>

Если мы говорим о конкретных ссылках, то переход на них можно запретить прямо внутри разметки.

<a href=“page.html” rel=“nofollow”>Гиперссылка</a>

Преимущества тега noindex и атрибута nofollow

Некоторые полезные свойства тегов мы уже обсудили выше, но на эту тему можно сказать больше.

  • Теги помогают сделать информацию на сайте более релевантной за счет вычленения из нее неуникального и разного рода утилитарного контента, который никак не связан с данными для посетителей. Не только пропадает текст, понижающий общую уникальность, но и увеличивается плотность вхождения ключевых слов.
  • Тегами можно спрятать информацию из сквозных блоков, которые часто воспринимаются роботами как дубликаты данных.
  • Я уже упомянул выше, что за тегом <noindex> частенько прячут контактную информацию, но не пояснил зачем. Дело в поисковых сниппетах Яндекса и Google, в которые ненароком могут попасть номера телефонов и адреса, указанные на другом сайте или закрепленные за другой компанией в Яндекс.Справочнике. 
  • Атрибут nofollow может прятать платные ссылки. Рекламные статьи, заметки и обзоры, размещенные на странице. Поисковикам запрещают переход по ним, чтобы избежать санкций со стороны Google или Яндекса.
  • Еще nofollow нужен для распределения приоритетов сканирования. Чтобы в него не попадали всякие формы регистрации и прочие технические страницы. Сканирование этой информации никакой пользы не принесет.

Выше мы использовали <noindex> и nofollow в качестве мета-атрибутов, чтобы задать свойства всей странице целиком. Посмотрим, как разрешить для роботов весь контент и все ссылки:

<meta name="robots" content="index, follow"/>

А это полный запрет на контент и ссылки:

<meta name="robots" content="noindex, nofollow"/>

Данный тег спрячет от ботов страницу целиком, но то же самое можно сделать, указав соответствующую ссылку в графе Disallow файла robots.txt, который отвечает за «исключение» страниц из индексации.

Но способы отличаются тем, что мета-тег разрешает поисковикам заходить на сайт и анализировать его содержимое. А вот если ссылка указана в robots.txt, то бот не сможет на нее зайти и провести индексирование.

Во избежание неадекватного поведения ботов, на уже проиндексированных страницах лучше использовать мета-теги, а в robots.txt заносите новые ссылки, неизвестные для Google и Яндекс.

Итоги

Теперь вы знаете, какие задачи выполняют теги noindex и nofollow. С помощью них можно строго задать поведение поисковых ботов Google и Яндекс в отношении вашего сайта и тем самым улучшить показатели SEO.

что это за теги, в чем разница и как правильно прописывать

Тег <noindex> – команда поисковому роботу Яндекс, чтобы он не индексировал определенную часть страницы. Для Google такой тег не подходит, к тому же, робот не предусматривает возможность закрытия от индексации какой-то части страницы.

Некоторые вебмастера ошибочно полагают, что с помощью тега <noindex> можно полностью спрятать часть страницы от робота. На самом деле, Яндекс обязательно проанализирует его содержимое. Единственное, за что отвечает этот тег – говорит поисковому роботу не помещать в индекс содержимое, заключенное в нем.

Поэтому если вы надеетесь, что сможете заключить в тег неуникальный контент, чтобы повысить общую уникальность страницы, у вас ничего не получится. Содержимое в теге все равно будет прочитано.

Зачем нужен тег <noindex>

Использовать тег рационально, когда нужно запретить боту показывать в поисковой выдаче определенную информацию. Например, это могут быть контактные данные, которые нежелательны для участия в поиске. Также бывает что на странице слишком часто меняется текст и его нет смысла индексировать.

Ссылки, которые заключены в теге <noindex> тоже будут индексироваться и учитываться пауками. Единственное отличие таких линков от обычных в том, что робот не проиндексирует их текстовое содержимое (анкор).

Если же вам нужно скрыть ссылки от робота, то придется воспользоваться атрибутом rel=»nofollow». Его одинаково хорошо понимают как Гугл, так и Яндекс. Атрибут не скроет ссылку от робота, но благодаря ему вес по ней не будет передаваться.

Как написать тег <noindex>

Пример 1:

<noindex><a href="https://puzat.ru/">Курсы по заработку на сайтах</a></noindex>

Yandex не индексирует анкор, но вес ссылки передает.

Пример 2:

<noindex><a href="https://puzat.ru/">Курсы по заработку на сайтах</a></noindex>

Yandex не индексирует анкор, но передает вес по ссылке.

Пример 3:

Совместное использование тегов nofollow и noindex вполне допустимы:

<noindex><a href=" https://puzat.ru/" rel="nofollow">Курсы по заработку на сайтах</a></noindex>

Такое оформление линка позволит удержать вес на странице и при этом Яндекс не прочитает анкор.

Прописать тег на странице сайта можно несколькими способами:

  1. <noindex>Содержимое, запрещенное для индексации</noindex>
  2. <!—noindex—>Содержимое, запрещенное для индексации<!—/noindex—

Для Яндекса нет разницы какой из вариантов использовать, так он их одинакового хорошо воспринимает. Но тег <noindex> не относится к официальной спецификации языка разметки HTML, поэтому другие поисковые системы могут воспринять его как ошибку.

Преимущества тега noindex

  1. Скрывая ненужный контент на странице, вы увеличиваете общую релевантность документа за счет увеличения плотности вхождения ключевых слов.
  2. Удобный и простой способ скрыть содержимое сквозных блоков, так как их содержимое выводится на разных страницах и выглядит дублем в глазах поисковых систем.
  3. В некоторых случаях поисковые боты используют контактную информацию в сниппетах. Если это не желательно, то тег noindex решит эту проблему.

Выводы

Тег <noindex> рационально использовать, если нужно запретить Яндексу показывать определенную информацию в поисковой выдаче. Если в нем заключены ссылки, и вы не заинтересованы, чтобы по ним передавался вес, нужно использовать атрибут nofollow. Однако бот все равно будет переходить по ссылке (например, если информация о ней была получена из иных источников: ссылки, карта сайта). Последний атрибут понимает как Яндекс, так и Google.

А вы используете теги noindex и nofollow на своем сайте? Поделитесь опытом в комментариях.

Noindex и nofollow: все что нужно знать

2. Mета-тег “robots” со значением “noindex”

– Что такое мета-тег “robots” со значением “noindex”

Мета-тег – это тег, который применяется только для роботов поисковых систем с целью закрытия от индексации (не сканирования).

Как использовать данный тег:

Мета-тег роботс устанавливается в секцию на той страницы, которую необходимо закрыть индексации или которая не должна индексироваться поисковыми системами.

<!DOCTYPE html>
<html><head>
<meta name="robots" content="noindex" />
(…)
</head>
<body>(…)</body>
</html>

Конструкция тега:

<meta name="robots" content="директива" />

Какие директивы могут быть использованы в Google:

Директива Описание
all Нет ограничений на индексирование и показ контента. Эта директива используется по умолчанию и не влияет на работу поисковых роботов, если нет других указаний.
noindex Не показывать эту страницу, а также ссылку “Сохраненная копия” в результатах поиска.
nofollow Не выполнять переход по ссылкам на этой странице.
none Аналогично метатегам noindex, nofollow.
noarchive Не показывать ссылку “Сохраненная копия” в результатах поиска.
nosnippet Не показывать фрагмент текста этой веб-страницы в результатах поиска. При этом уменьшенное статическое изображение (если оно есть) останется видимым.
notranslate Не предлагать в результатах поиска перевод этой страницы.
noimageindex Не индексировать изображения на этой странице.
unavailable_after: [RFC-850 date/time] Не отображать эту страницу в результатах поиска после указанного времени/даты. Время/дату следует указать в формате RFC 850.

*данные из справки Google.

Директива Описание
noindex Не индексировать текст страницы. Страница не будет участвовать в результатах поиска
nofollow Не переходить по ссылкам на странице
none Соответствует директивам noindex, nofollow
noarchive Не показывать ссылку на сохраненную копию в результатах поиска
noyaca Не использовать сформированное автоматически описание
index | follow | archive Отмена соответствующих запрещающих директив
all Соответствует директивам index и follow — разрешено индексировать текст и ссылки на странице

*Данные из справки Яндекс.

Как видим, основная часть директив одинаковые.

– Варианты использования meta robots noindex

Можно выделить наиболее частые конструкции, которые используются SEO-оптимизаторами на практике:

  1. – если не нужно, чтобы страница индексировалась, но нужно, чтобы роботы могли ходить по ссылкам на странице.
  2. ИЛИ- если не нужно, чтобы страница индексировалась и роботы переходили по ссылкам на странице.
  3. ИЛИ- если нужно, чтобы страница индексировалась, но не нужно, чтобы роботы переходили по ссылкам на странице.

При этом, если вам нужно закрыть страницу от индексации в Яндекс, используем:

<meta name="yandex" content="noindex"/>

В Google:

<meta name="googlebot" content="noindex" />

– Отличия meta robots noindex от noindex в robots.txt

Основное отличие в следующем:

  • Мета-тег предназначен для закрытия страницы от индексации (запрет индексации).
  • Директива Disallow в файле robots.txt предназначена для закрытия от сканирования (не индексации).

Также, стоит отметить, что с помощью директивы Disallow можно закрыть от сканирования не только конкретную страницу, но и целую папку, в отличие от мета-тега роботс, который может запретить индексацию только той страницы, на которой он размещен.

В каких случаях нужно использовать мета-тег “robots”:
Для исключения из индекса поисковой системы страницы, которая уже проиндексирована, а также точечного или массового удаления из индекса или запрета ненужных страниц.

В каких случаях нужно использовать Disallow в файле robots.txt:
Для запрета сканирования служебных файлов и документов, а также нежелательных страниц: динамические страницы фильтра, страницы с результатами поиска и тд.

Воспользуйтесь развернутой инструкцией: Robots.txt: полное руководство по настройке

Важно:

  1. Для поисковой системы Яндекс файл robots.txt – обязательная директива, для Google – рекомендация.
  2. Поисковый робот может обращаться к файлу роботс не при каждом заходе на ваш сервер.

– Распространенные ошибки
  • Ошибка 1. Удаление страницы из индекса с помощь Disallow в файле robots.txt
    Почему это ошибка? Страница уже проиндексирована и находиться в индексе – вы установили запрет сканирования в файле робот, теперь робот не будет заходить на нее, но она останется в индексе.
  • Ошибка 2. Удаление страницы из индекса с помощь Disallow в файле robots.txt + установка мета-тега роботс
    Почему это ошибка? Страница уже проиндексирована и находиться в индексе – вы установили запрет сканирования в файле робот, теперь робот не будет заходить на нее, т.е. робот не сможет зайти на страницу и увидеть, что на ней установлен запрет индексации, следовательно, он не сможет исключить ее из индекса.

Используем rel=nofollow и noindex для Yandex » WPbloging

В апреле, поисковик Yandex, обрадовал рунетовских веб-мастеров, включением поддержки атрибута rel=»nofollow» в ссылках. Какую пользу это нам — блоггерам принесет? Как правильно прописать атрибут rel=»nofollow» в ссылках и что теперь будет с <noindex>?

Давайте попробуем разобраться в этих новинках Яндекса .

Небольшая предыстория атрибута rel=nofollow

Что такое rel=nofollow?

Rel=» « — атрибут в ссылке <a>, указывающий отношение ссылки к целевой странице. Также, есть еще атрибут Rev=» «, указывающий отношение целевой страницы к ссылке, например (ссылка с rev=»sponsor» указывает, что это спонсорская ссылка). Но об этом в следующей статье.

Nofollow — статус, говорящий о том,что вы не одобряете данную ссылку.

Исходя из вышесказанного:

Rel=nofollow — определяет отношение вашей ссылки к целевой странице как не одобряемое. Применительно к поисковикам, данный атрибут указывает индексирующим роботам, что по данной ссылке не следует переходить на целевую страницу.

Rel=nofollow был введен и стандартизирован в 2005 году, в ответ на многочисленный ссылочный спам, присутствующий в блогах. Инициатором введения была поисковая система Google, источник.

Google, встречая ссылку с данным атрибутом, не следует по данной ссылке и не передает вес PR целевым страницам. Также, данные ссылки не учитывались в расчетах распределения ссылочного веса по ссылкам страницы. Но, так было до 2010 года. На данный момент, Google, также не передает ссылочный вес и не следует по ссылкам с rel=»nofollow», но вот ссылочный вес, внутри страницы, стал распределятся и на эти ссылки но впустую. То есть, если у вашей страницы PR-10 и 10 ссылок на странице, где 5 из них закрыты, то каждая открытая ссылка передавала по 2PR на целевую страницу. Теперь каждая открытая ссылка будет передавать 1PR по открытым ссылкам и по 1PR в пустоту по закрытым. Но эта статья не о Google, вернемся к Яндексу.

Yandex, до апреля месяца 2010г., не учитывал данный статус. В рекомендациях Яндекса находим нашумевший тег <noindex>, который позволял сделать тоже самое и больше. Теперь там и nofollow.

В чем разница rel=nofollow и <noindex>

Так в чем же проблема?
Зачем Яндексу понадобилось вводить поддержку rel=»nofollow»?

Все дело в том, что тег <noindex> это личная инициатива Yandex. Данный тег нигде в мире, кроме самого Яндекс, не поддерживается и не стандартизирован. При проверке ресурса на ошибки в коде и поддержке web-стандартов, веб-мастера всегда получали «не валидный» код. То есть, ваш ресурс содержит ошибки. Но, спешу вас успокоить, это не критическая ошибка и практически ни на что не влияет. Для тех кому важен валидный код, вот структура, рекомендованная самим Yandex для валидности вашего кода:

<!--noindex-->Блок вашего закрываемого текста<!--/noindex-->

Еще одна проблема тега <noindex> в том, что зарубежные веб-мастера, не ведая о данном теге, не используют его в разработках своих плагинов к WordPress. Приходится данные плагины адаптировать под Яндексовскую реальность.
Если в комментариях блога ссылки были закрыты атрибутом rel=»nofollow», то для Яндекса эти ссылки были открыты. Это означало, что роботу приходилось путешествовать по всем ссылкам указанным в комментариях.

Атрибут со статусом rel=»nofollow» стандартизирован и используется во всем мире для указания поисковикам, что ссылка не одобрена автором и  по ней не нужно следовать.
Например, если закрыть служебную страницу от индексации в robots.txt, а ссылку оставить открытой, робот проследует на данную страницу, но не проиндексирует ее. Зачем тогда тратить ресурсы робота на переходы по ненужным страницам? Еще есть один нюанс, если на вашу служебную страницу ведут открытые ссылки с других внешних источников, то ваша, как бы закрытая страница, попадет в поиск, даже если она закрыта в robots.txt. Об этом также расскажу в следующих статьях.

Исходя из всего этого, по многочисленным просьбам и жалобам веб-мастеров, Яндекс ввел поддержку стандартизированного W3C атрибута со статусом rel=»nofollow». Атрибут закрывает ссылки от переходов роботом и не передает вес. Теперь многое стало проще. Но есть один нюанс. Анкоры ссылок будут проиндексированы как текст.

Зачем нужен <noindex>?

Тег <noindex> очень важен, если вы хотите, чтобы часть текста, со всеми анкорами ссылок и т.д., не индексировалась и не попала в поисковую базу Yandex.
Например, у вас на странице может быть служебная информация, или блок текста с сайта, который используется как негативный пример. Вы не хотите, чтобы поисковик  связал ваш сайт с данным текстом или индексировал служебную информацию и сохранил у себя в базе. Для этого данный блок обрамляется тегом <noindex>.

К сожалению, такого инструмента для Google не существует. Вполне возможно, что Google или консорциум W3C в будущем обратят внимание на данный тег или придумают свой, и веб-мастера получат в свой инструментарий еще один полезный инструмент.

Как правильно прописать rel=nofollow и <noindex>

  1. Для закрытия ссылок от индексации, с помощью rel=»nofollow»,  используется простая схема:
    <a rel=»nofollow» href=»http://www.site.com» title=»Подсказка»>Ссылка на сайт</a>
    перехода по ссылке не будет.
  2. Для закрытия блока текста тегом <noindex>, со всем содержимым, в том числе и с анкорами ссылок, используется схема:
    <!--noindex-->Блок вашего закрываемого текста<!--/noindex-->
    данный текстовый блок не будет проиндексирован в Яндекс, со всеми текстами ссылок.
  3. Для закрытия блока текста тегом и ссылок в блоке, используется схема:
    <!--noindex-->Блок вашего закрываемого текста <a rel="nofollow" href="http://www.site.com" title="Подсказка">Текст анкор ссылки</a> Блок вашего закрываемого текста<!--/noindex-->
    данный блок не будет проиндексирован в Яндекс, со всеми ссылками содержащимся в данном блоке.

Что изменилось с вводом поддержки rel=nofollow?

  1. Для тех, кто ведет ресурсы для людей и не использует спам-продвижения, почти ничего не изменится. Возможно некоторое уменьшение числа внешних ссылок, закрытых с rel=»nofollow».
  2. Для тех, кто использовал в продвижении ссылочный спам (спам в комментариях, спам в форумах, соц. сетях, Википедии и т.д), и у кого основная ссылочная масса, дающая ТИЦ, состояла из таких ссылок, будет существенное снижение ТИЦ и как правило, проседание в поисковой выдаче Yandex.

Источник

Кратко, о новинках апреля 2010 года в Яндекс:

  1. У страницы поисковой выдачи Яндекс теперь фиксированная ширина.
  2. Появились в выдаче навигационные цепочки, у некоторых сниппетов и даты публикации.
  3. Появился колдунщик видео.
  4. В панели веб-мастера появилась возможность просмотра статистики по собственным ключевым словам.

P.S. Теперь осталось дождаться включения поддержки Яндексом канонического атрибута rel=»canonical», о котором я писал в статье о дублированном контенте, и многие блогеры вздохнут с облегчением.
Хорошая новость, в конце мая 2011г. Яндекс стал учитывать атрибут rel=»canonical». Принесет это облегчение или нет, покажет время.


Нашел ошибку в тексте? Выдели ее мышкой и нажми

Noindex, nofollow для Google — как и когда использовать с пользой для SEO продвижения

Noindex – это директива для поисковых систем, которая запрещает отображать страницу либо часть текста в результатах поиска. Давайте рассмотрим подробнее – где и в каких случаях используется эта директива?

Mетатег “robots” со значением “noindex”

Чтобы не допустить определенную страницу к индексированию поисковыми системами используется метатег robots с добавлением значения “noindex”.

В разделе <head> страницы размещается следующая конструкция:
<head>
<meta name="robots" content="noindex" />

</head>

 

Данный метатег распространяется на всех роботов поисковых систем. Но иногда может использоваться только для определенных роботов, в зависимости от целей. Например, можно запретить индексацию только лишь определенной поисковой системе, указав в значении для атрибута “name” название робота (например – Googlebot, для Google):

<meta name="googlebot" content="noindex" />

 

Пример: Вы не хотите, чтобы ваши изображения были найдены через поиск по изображениям и использованы кем-то в личных целях.
Решение: Можно запретить индексацию страницы с данными изображениями только в поиске по изображениям, используя робот Googlebot-Image:

<meta name="googlebot-image" content="noindex" />

Таким образом, страница появится в результатах обычного поиска, но её содержимое не будет индексироваться для поиска по изображениям.

 

Тег <noindex> – для закрытия от индексации части контента

Для того, чтобы закрыть от индексации часть текста используется тег <noindex>, который может быть помещен в любые элементы html-кода страницы:

<noindex>текст, который будет запрещен к индексированию</noindex>

Однако, данный тег будет восприниматься только поисковиком Яндекс, так как он не является стандартизированным и был введен только этой поисковой системой.
Если мы разместим текст внутрь тега, то он не будет индексироваться при сканировании роботом Яндекс и при этом будет попадать в индекс всех остальных поисковиков.

Валидность

Так как тег <noindex> не является стандартизированным, то могут возникать ошибки валидации. Чтобы код оставался валидным, рекомендуется использование тега в таком виде:

<!--noindex-->текст, который будет запрещен к индексированию<!--/noindex-->

 

Варианты использования meta robots noindex

Мета-тег “Robots” содержит директивы, разделенные запятыми:

  • Index/Noindex задает правило индексации страницы;
  • Follow/Nofollow разрешает или запрещает переходить по ссылкам со страницы. Значения по умолчанию – Index и Follow.

Существуют следующие варианты использования метатега:

<meta name=“robots” content=“index,follow”> Разрешено индексировать страницу и переходить по ссылкам на ней.
<meta name=“robots” content=“noindex,follow”> Запрещено индексировать страницу, но можно переходить по ссылкам на ней.
<meta name=“robots” content=“index,nofollow”> Разрешено индексировать страницу, но нельзя переходить по ссылкам на странице.
<meta name=“robots” content=“noindex,nofollow”> Запрещено индексировать страницу и переходить по ссылкам на ней.

Как показывает практика (см. эксперимент С. Кокшарова), Google обычно корректно воспринимает данные правила. Что касается Яндекс, то он может не всегда следовать правилу “noindex, nofollow” и переходит по ссылкам, чтобы проверить их качество (под такими директивами иногда прячутся недобросовестные сайты).

 

Отличия meta robots noindex от noindex в robots.txt

Есть 2 способа скрыть страницу от индексирования:

  1. Закрыть страницу в robots.txt с помощью Disallow.
  2. Добавить на страницу в <head> метатег: <meta name="robots" content="noindex" />

Основные отличия:

  • В robots.txt можно закрыть от индекса не только страницу, а и папку, тип файла, служебные страницы сайта, результаты поиска по сайту и т.д. – то есть можно работать массово с группами страниц.
  • <meta name=”robots” content=”noindex, follow”> позволяет закрывать страницы точечно, а также передавать ссылочный вес.

Если необходимо закрыть определенную страницу, лучше все-же воспользоваться метатегом чтобы не перегружать robots.txt лишними строками. Кроме того, выше вероятность того, что правило сработает (по сравнению с robots.txt).
Помните, что robots.txt – это всего лишь рекомендации, то есть поисковые системы могут игнорировать его — индексировать и сканировать запрещенные URL. Поэтому, если вы хотите скрыть URL с гарантией, лучше это сделать через метатег. А если уж наверняка – то можно, например, закрыть директории паролем.

 

Распространенные ошибки

Страница закрыта через метатег, но все равно находится в поиске
Возможные причины:

  1. Страница закрыта также robots.txt и робот не заходит на неё, соответственно не может прочитать директиву в метатеге noindex.
  2. Робот еще не успел посетить страницу (на сайте много страниц).

Решение: Чтобы закрыть страницу через метатег, необходимо, чтобы она была открыта в robots.txt. Если на сайте много страниц, а страницу нужно срочно закрыть – лучше воспользоваться панелью вебмастера.

Внедрение одновременно noindex и rel canonical на страницах (например, пагинации)
Это частая ошибка вебмастеров, ведь эти два тега противоречат друг другу. Google дает четкий ответ по этому поводу тут: https://www.seroundtable.com/noindex-canonical-google-18274.html .

Решение для страниц пагинации:

  • canonical не использовать,
  • на страницах пагинации прописать: <meta name=”robots” content=”noindex, follow” />, а также link rel=”prev” и link rel=”next”.

На сайте есть не закрытые метатегом служебные страницы – версии страниц «для печати», а также служебные/шаблонные страницы, которые создаются динамически. Это частая проблема, так как в индекс могут попасть сотни ненужных страниц. В дальнейшем эти «мусорные» страницы могут ранжироваться в поиске вытесняя полезные продвигаемые страницы. Закрытие через robots.txt может не решить проблему.

Решение: Google советует закрыть такого рода страницы через метатег <meta name="robots" content="noindex, nofollow" />.

 

Атрибут rel-nofollow

Значение rel=”nofollow” запрещает поисковой системе переходить по конкретной ссылке.
Пример использования: <a href="test.com" rel="nofollow">Ссылка</a>

Google утверждает: «…Как правило, переход не производится. Это означает, что по этим ссылкам Google не передает ни PageRank, ни текст ссылки…»

Однако, «как правило» предполагает, что бывают исключения. Также, например, ссылки с nofollow могут быть проиндексированы, если на страницу ссылаются другие сайты без использования nofollow, либо страница есть в Sitemap.

 

Как и где использовать

Рекомендуется использовать rel=”nofollow”:

  • для закрытия ссылок на некачественный контент или контент, которому вы не доверяете,
  • для закрытия неуникального контента,
  • для закрытия платных ссылок,
  • для корректной индексации (например, чтобы скрыть технические страницы и не тратить ресурсы робота на их сканирование).

Помимо этих случаев, многие оптимизаторы используют rel=”nofollow”, когда хотят, чтобы внешняя ссылка не передавала вес.

 

Передает ли nofollow вес

По словам Google, rel=”nofollow” не передает ссылочный вес. Однако, есть свидетельства, что Google учитывает ссылки социальных сетей Facebook, Twitter не смотря на nofollow.

Что касается Яндекс, то с 2010 года он не учитывает ссылки с nofollow и, соответственно ссылка не передает вес. Это официальная версия Яндекс. Однако, есть подтверждения экспериментов, что Яндекс учитывает анкоры таких ссылок.
Как бы там ни было, ваш ссылочный профиль должен быть разнообразным и рекомендуется разбавлять анкор-лист ссылками с rel=”nofollow”.

 

Распространенные ошибки

Использование rel=”nofollow” для внутренней перелинковки.
Google так делать не советует (https://www.searchengines.ru/mett_katts_ne_nofollow_int_links.html )

Использовать rel nofollow на каждый язык языковой версии чтобы «сегментировать» их, не передавая вес друг-другу.
Не нужно с помощью rel nofollow пытаться манипулировать весом. Если сайт целостный, все равно в рамках внутренней перелинковки вес будет переходить. Как уже говорилось выше – Google не приветствует rel nofollow для внутренней перелинковки. Но не забудьте об использовании hreflang.

Использовать rel nofollow для ссылок на страницы фильтра.
Рекомендуется не использовать атрибут nofollow, а реализовать фильтры с помощью JS или закрывать страницы метатегом noindex, nofollow.

 

Надеемся, что данная статья ответила на основные вопросы по использованию тегов noindex, nofollow. Желаем успешного продвижения!

что означает и что такое nofollow-ссылка

Атрибут nofollow – это тег в HTML-коде, служащий для запрета индексации исходящих ссылок на сайте. Он используется SEO-оптимизаторами и веб-мастерами для контроля гиперссылок, ведущих на внешние площадки. Это продиктовано тем, что алгоритмы поисковых систем негативно относятся к сайтам, на которых присутствует большое количество бэклинков. Обнаружение ссылочного спама ведет к неизбежной пессимизации позиций веб-ресурса в поисковой выдаче, а в запущенных случаях – к полному выходу сайта из индекса.

Сегодня существуют разные мнения насчет актуальности запрета индексации ссылок. Поэтому важно разобраться, что такое rel nofollow и чем использование этого тега может помочь в поисковой оптимизации сайтов.

Общее понятие об атрибуте nofollow

В системе гипертекстовой разметки HTML тег nofollow является одной из вариаций применения атрибута rel. В коде страницы его можно обнаружить после URL-адреса, на который ведет гиперссылка. К примеру, [a href=»http://sayt.com/&quot;&quot; rel=»nofollow»]анкор[/a].

В буквальном переводе с английского языка «nofollow» значит «не следовать». То есть это команда для алгоритмов поисковых систем не переходить по ссылке, а значит, и не учитывать ее в индексации. Теперь понятно, что nofollow-ссылка – это линк, который не видит робот поисковой системы.

С какой целью запрещают индексацию гиперссылок

Можно выделить следующие самые распространенные причины, из-за которых оптимизаторы используют атрибут rel nofollow:

  • дисбаланс между входящими и исходящими ссылками является причиной для понижения позиций сайта в поисковой выдаче или для его полной блокировки;
  • необходимость скрыть от индексирования служебные или дублирующиеся страницы;
  • даже небольшое количество линков на «мусорные» или нерелевантные ресурсы может испортить результаты ранжирования;
  • использование атрибута позволяет защититься от ссылочного спама в комментариях;
  • регулирование естественности ссылочного профиля;
  • необходимость во внутреннем перераспределении ссылочной массы.

Как узнать об использовании скрытых от индексации ссылок на внешних ресурсах

Иногда может возникать необходимость понять, как гиперссылки вставляются на сайт сторонним веб-мастером. Обычно это требуется тогда, когда чужой сайт рассматривается в качестве площадки-донора для размещения бэклинка. Чтобы определить, используется ли атрибут rel=»nofollow», нужно просто провести несколько манипуляций в браузере. Опишем процедуру на примере Google Chrome, но в других браузерах процесс несильно отличается.

  1. Курсором выделяется необходимая ссылка.
  2. Клик правой кнопкой по выделенной зоне откроет контекстное меню.
  3. Нужно выбрать «Посмотреть код элемента».
  4. Проверяется наличие rel=»nofollow» в коде ссылки.

Если на сайт вставляются только неиндексируемые ссылки, то они не повлияют на продвижение внешнего ресурса, поэтому их размещение не имеет смысла. Также не стоит публиковать ссылки на сайтах, где в их код вставляются следующие атрибуты: nofollow noopener, noindex, dofollow и redirect. Если наличие этих значений необходимо проверять регулярно, то стоит использовать специальные дополнения для браузеров, которые автоматизируют вышеописанный процесс. К примеру, можно бесплатно установить RDS Bar.

Как алгоритмы Google «понимают» атрибут rel nofollow

В официальной документации для веб-мастеров можно найти прямую трактовку того, что использование nofollow значит полный запрет перехода по ссылке для роботов. То есть применение этого атрибута полностью исключает гиперссылку из индексации, то есть она не учитывается при ранжировании обоих сайтов.

Однако если таким способом закрывать страницы, то они могут попасть в индекс. Это объясняется тем, что на них могут вести бэклинки без ограничений, которые находятся на других площадках или на самом сайте.

Также нужно учитывать, что в технической документации присутствует оборот «как правило». То есть можно предположить, что поисковая система все-таки может учитывать закрытые от индексации ссылки при ранжировании. Многие оптимизаторы считают, что nofollow-бэклинки всегда учитываются алгоритмами, но в силу снижения значения ссылочных факторов их роль сильно сужена. Однако это не значит, что закрытые ссылки нельзя использовать для продвижения.

Значение nofollow-ссылок для монетизации

Если говорить глобально, то раскрутка любого сайта нацелена прежде всего на привлечение трафика, так как прибыльность во многом привязана к посещаемости ресурса. Следовательно, даже если ссылка на внешней площадке закрыта от индексации, то по ней все равно могут переходить пользователи. Правильная стратегия посева nofollow-ссылок способна дать следующие результаты:

  • активизация продаж. Дополнительный трафик можно конвертировать в конверсионные действия. Нужно понимать, что сама ссылка не продает, а только приводит пользователей. Поэтому сначала нужно сформировать привлекательное предложение. Важно размещать ссылки на площадках концентрации целевой аудитории;
  • улучшение позиций в выдаче. Да, nofollow-ссылки не учитываются при ранжировании. Но они могут привести целевой трафик, который поможет улучшить поведенческие факторы, а это не останется незамеченным со стороны поисковых систем;
  • вирусный эффект. Если закрытая ссылка будет вести на действительно интересный контент или выгодное предложение, то пользователи начнут делиться ей в социальных сетях. Это позволит получить активный источник естественного трафика, что тоже поможет в продвижении.

Какие сайты выбрать для посева nofollow-ссылок

Для размещения заведомо закрытых ссылок нужно использовать популярные сайты. В отличие от методов ссылочного продвижения здесь не так важен сам факт публикации бэклинка, сколько объем потенциального трафика. Важно не просто оставить ссылку, а сопроводить ее привлекательным описанием, которое будет стимулировать кликать по ней. Для этого стоит изучить приемы крауд-маркетинга. Хорошими площадками для публикации закрытых ссылок являются следующие ресурсы:

  • Youtube и другие крупные видеохостинги. Здесь ссылки в комментариях не учитываются, но они могут привести целевую аудиторию на сайт, чем выполнят свою положительную функцию;
  • блоги и форумы. В интернете легко найти тематические места общения людей, которые могут стать потенциальными клиентами. Нужно просто написать интересный комментарий и предложить ознакомиться с контентом по ссылке;
  • социальные сети. На этих ресурсах наблюдается самая большая активность пользователей. Ссылки не индексируются, но при удачном размещении они могут дать взрывной прирост качественного трафика.

Способы улучшения результативности использования nofollow-ссылок

Сегодня многие пользователи устали от засилья бесполезных ссылок на разных площадках. Важно позаботиться о том, чтобы ваш бэклинк не разочаровал посетителя. К примеру, нельзя оставлять ссылку с комментарием о том, что она приведет в магазин с самыми дешевыми велосипедами, если ценовая политика не отличается доступностью. В таком случае конверсия точно не увеличится, а пользовательские факторы и репутация бренда значительно ухудшатся.

При продвижении закрытыми ссылками важно найти свою аудиторию. Нужно понимать, что не весь трафик полезен. Если привлечь нецелевых пользователей, которым совершенно не интересен контент или предложение, то они сразу покинут сайт. Поэтому перед публикацией ссылок важно качественно оптимизировать посадочную страницу.

Подведем итоги

Сегодня нет достоверной информации о том, действительно ли nofollow-ссылки не учитываются при индексации. Одно можно сказать точно: они не вредят ранжированию. Но даже если закрытые линки не имеют значения с точки зрения SEO, то они могут стать отличным источником целевого трафика. Существует множество возможностей бесплатного размещения таких бэклинков на ресурсах с массовой посещаемостью. Поэтому не стоит терять перспективную возможность привлечения заинтересованных пользователей на веб-ресурс.

В чем разница между NoIndex и NoFollow?

В чем разница между NoFollow и NoIndex?

Цифровые маркетологи тратят много времени и энергии на совершенствование каждой страницы контента на веб-сайте. У каждой страницы есть цель, с хорошо проработанным и стратегически сформулированным контентом, ориентированным на целевого пользователя. Контент создается для привлечения потенциальных клиентов и повышения авторитета веб-страниц и их соответствующих доменов.Затем эти страницы отправляются для индексации в поисковые системы, чтобы их можно было просканировать и в конечном итоге сохранить, чтобы ваш конечный пользователь нашел их.

Однако есть страницы, которые не следует сканировать. Эти страницы могут помешать тяжелой работе, которую вы проделали для создания красивого и индивидуального контента. Имея это в виду, вам нужно знать, как правильно сообщить сканерам поисковых систем, что вы не хотите, чтобы ваш контент индексировался или сканировался.

Что такое NoIndex?

NoIndex — это метатег, который добавляется в код заголовка веб-страницы, чтобы сообщить поисковым системам, что, хотя они могут сканировать страницу, чтобы понять ее содержимое, они не могут индексировать страницу, чтобы она отображалась в результатах поиска.Это пример того, как NoIndex отображается в исходном коде веб-страницы:

.

Что такое NoFollow?

NoFollow — это метатег, который добавляется в код заголовка веб-страницы и указывает поисковым системам не переходить по ссылкам на этой странице. По сути, это отклоняет ссылки на этой странице и информирует поисковую систему о том, что не следует передавать какие-либо полномочия или «ссылочный вес» страницам, на которые есть ссылки в вашем контенте. Это пример того, как NoFollow отображается в исходном коде веб-страницы:

.

Чем они отличаются?

NoIndex и NoFollow совершенно разные по полезности.Вы будете использовать NoIndex, когда указываете поисковой системе не сохранять вашу веб-страницу для отображения в результатах поиска, в то время как вы будете использовать NoFollow, когда вы указываете поисковым роботам не переходить по ссылкам на вашей странице. Таким образом, NoIndex предназначен для вашей веб-страницы , а NoFollow — для ссылок , которые существуют на вашей веб-странице.

Когда следует использовать каждый из них?

Примером метатега NoIndex является страница благодарности. Вы бы не хотели, чтобы поисковая система отображала страницу благодарности на странице результатов поисковой системы, поскольку обычно это страница, на которую попадает пользователь после того, как он заполнил вашу форму генерации лидов.Для того, чтобы поисковые системы знали, что эта страница не должна храниться, вы должны указать метатег NoIndex в коде шапки вашей веб-страницы. Другими примерами страниц, которые вы не хотели бы индексировать поисковыми системами, являются страницы «Политика конфиденциальности», «Положения и условия» и «Страница не найдена».

Примером метатега NoFollow также является целевая страница. Если на вашей целевой странице есть ссылка на ваше предложение, скажем, на электронную книгу «10 советов, как максимально эффективно использовать ваши усилия в области цифрового маркетинга», вы должны убедиться, что поисковый робот не просканирует эту ссылку и не начнет индексировать этот контент.

Изучение ресурсов для защиты и оптимизации вашего контента для поисковых систем является важной частью вашего контент-маркетинга и инициатив по привлечению потенциальных клиентов. Правильное использование метатегов NoFollow и NoIndex поможет вам максимально эффективно использовать свою контент-стратегию и убедиться, что вы не теряете ценные лиды.

Как реализовать NoIndex или NoFollow на моем веб-сайте?

Если вы используете WordPress, мы рекомендуем бесплатный инструмент SEO Yoast для управления вашими усилиями по SEO на странице.Чтобы активировать функции NoIndex и NoFollow, вы должны включить «расширенные настройки» на панели настроек Yoast.

Здесь вы найдете варианты реализации правил NoIndex и NoFollow на каждой странице вашего веб-сайта.

Просто как пирог!

Noindex vs Nofollow vs Disallow Commands

29 марта 2019 г.

Следующие части взяты из моей книги, Tech SEO Guide

Существует распространенная тема путаницы в отношении разницы между командами noindex, nofollow и disallow. Все три являются мощными инструментами, которые можно использовать для повышения эффективности органического поиска веб-сайта, но у каждого есть свои уникальные ситуации, в которых они уместны. К сожалению, во многих случаях они применяются неправильно, что значительно ухудшает поисковую эффективность сайта.

Две операции поискового робота

Чтобы понять, что делают команды noindex, nofollow и disallow, давайте сделаем шаг назад и рассмотрим, что делают роботы поисковых систем.Поисковые системы рассылают роботов, чтобы они сканировали и понимали веб-сайт. Эти роботы сложны, но имеют две основные операции.

  • Сканирование : Как только робот обнаруживает веб-сайт, он просматривает все страницы и файлы на веб-сайте, которые может найти. Могут быть установлены ограничения на то, какие файлы и страницы могут видеть роботы, и могут быть внесены другие изменения, чтобы гарантировать, что робот найдет все, что ему нужно.
  • Индексирование : После сканирования роботы используют всю информацию, собранную во время этого сканирования, чтобы решить, какая информация, содержащаяся на конкретной странице, может и должна отображаться в результатах поиска.В рамках этого роботы поисковых систем также будут решать, в какие результаты поиска должны быть включены страницы веб-сайта (если таковые имеются) и где страница должна занимать место в этих результатах.

Disallow, Noindex и Nofollow

Disallow: управление сканированием

Первый способ управления поисковым роботом — это команда disallow. Это указано в файле robots.txt. Файл robots.txt представляет собой обычный текстовый файл, размещенный в корневом каталоге вашего веб-сайта.Он предоставляет роботам директивы, сообщающие им, какие каталоги вы бы предпочли, чтобы они не сканировали.

Если указано, поисковый робот, который соблюдает эту команду, не будет сканировать страницу, файл или каталог, которые были запрещены. Например, вы можете указать это в файле robots.txt, чтобы запретить поисковому роботу сканировать что-либо, расположенное в /a-secret-directory.

Disallow: /a-secret-directory

Вы также можете указать запрет только для определенного робота.Например, эта запись в файле robots.txt предписывает ботам Google избегать каталога «my-content-admin-area». Однако боты Bing все еще могут сканировать этот каталог.

user-agent: googlebot
Disallow: /my-content-admin-area/

Запрещенные файлы могут по-прежнему индексироваться и отображаться в результатах поиска. Например, Google и Bing могут найти ссылку на запрещенную страницу на вашем веб-сайте или в другом месте в Интернете. Они не могли просканировать страницу, чтобы увидеть ее содержимое, но они знали бы, что страница существует, и могли бы отобразить страницу в индексе Google.

Вообще лучше ничего не запрещать. Один из наборов файлов, которые вы никогда не должны запрещать, — это файлы JavaScript, CSS или изображения. Эти файлы контролируют внешний вид страницы, и Google полагается на эти факторы дизайна при оценке страницы, особенно при определении удобства для мобильных устройств.

Мета-роботы Nofollow: управление сканированием

Далее у нас есть команда nofollow. На самом деле есть два разных оператора nofollow. Команда nofollow, управляющая сканированием, — это метатег robots nofollow.Этот nofollow применяется на уровне страницы путем указания nofollow в метатеге robots в страницы.



...



...

При размещении в веб-страницы метаданные nofollow предписывают роботу поисковой системы не сканировать ссылки на странице. Это часть большого набора директив, которые вы можете указать в метатеге robots.

Роботы, которые соблюдают эту директиву, смогут сканировать эту страницу, но не будут сканировать страницы, на которые есть ссылки с этой страницы. Если вы не хотите, чтобы роботы вообще сканировали страницу, не говоря уже о ссылках, содержащихся на этой странице, то запрет robots.txt является лучшим методом контроля сканирования.

Rel Nofollow: объяснение природы ссылки

Другая команда nofollow — это команда rel=»nofollow». Это может повлиять на сканирование, но более важной целью является дальнейшее объяснение природы этой ссылки.Традиционно rel=»nofollow» использовался для указания любых ссылок, которые были спонсированы или имели денежное отношение. С тех пор Google ввел другие типы квалификаторов: rel=”sponsored” и rel=”ugc”. Квалификатор rel=”sponsored” предназначен для любой платной ссылки, rel=”ugc” – для любой ссылки, содержащейся в пользовательском контенте, а rel=”nofollow” – для любой другой ссылки, с которой боты Google не должны ассоциироваться. Ваш сайт.

Эти команды rel задаются на уровне ссылки с атрибутом «rel», добавленным к определенному тегу .Например, эта ссылка будет nofollow, а эта ссылка на страницу /no-robots-here не будет связана с вашим сайтом.

Ссылка

Noindex: управление индексацией ярлык. Когда мета-тег noindex включен на страницу, поисковым роботам разрешается сканировать страницу, но им не рекомендуется индексировать страницу (это означает, что страница не будет включена в результаты поиска, если эта команда соблюдается).

Пример:

Несколько замечаний:

  • Ранее вы могли указать noindex в файле robots.txt. Однако это больше не поддерживается Google (и, вероятно, никогда не поддерживалось). При таком официальном отсутствии поддержки единственный способ указать noindex — на уровне страницы.
  • Если вы не можете добавить метатег в страницы, вы также можете использовать X-Robots в заголовке HTTP. Это может быть полезно для запрета индексации содержимого, отличного от HTML, например PDF-файлов или некоторых изображений.

Использование Noindex и Disallow

Важно понимать, как команды Disallow и Noindex работают вместе. Эти команды можно комбинировать тремя способами, чтобы влиять на индексирование и сканирование.

Disallow Noindex
Сценарий 1 Х
Сценарий 2 Х
Сценарий 3 Х X

В сценарии 1 страница с настройкой noindex не будет включена в результаты поиска.Однако робот по-прежнему может сканировать страницу, то есть роботы могут получать доступ к содержимому страницы и переходить по ссылкам на странице.

В сценарии 2 страница не будет сканироваться, но может быть проиндексирована и отображаться в результатах поиска. Поскольку робот не сканировал страницу, он ничего о ней не знает. Любое содержание этой страницы, включенное в результаты поиска, будет собрано из других источников, таких как ссылки на страницу.

Сценарий 3 будет работать точно так же, как сценарий 2, если в метатеге robots был указан noindex.Это связано с тем, что при указании Disallow робот не будет сканировать страницу. Если робот не перейдет на страницу, он не увидит метатег, указывающий не индексировать страницу. Если для страницы необходимо установить noindex и запретить, сначала установите noindex, а затем, после удаления страницы из поискового индекса, установите disallow.

Рекомендации Nofollow

Когда использовать Nofollow для контроля сканирования?

Как правило, роботам следует сообщать, что они могут переходить по всем ссылкам на странице.Слишком агрессивное указание, по каким ссылкам переходить или nofollow, может начать выглядеть так, как будто веб-сайт пытается манипулировать восприятием веб-сайта роботом. Это практика, известная как скульптинг страницы, когда команды nofollow используются для моделирования того, как сигналы с одной страницы передаются на другую. В лучшем случае эти попытки манипулировать роботом уже не работают. В худшем случае попытки манипулировать роботами с помощью rel nofollow могут привести к штрафу.

Когда использовать квалификаторы Rel в ссылках

Rel=»nofollow», rel=»sponsored» или rel=»ugc» следует использовать в определенных случаях, когда вам необходимо четко обозначить характер ссылки.Ярким примером являются ссылки на странице, где в обмен на ссылку была произведена оплата. Например, если сообщение в блоге содержит ссылки на рекламу, эти ссылки должны иметь атрибут rel nofollow. Однако с помощью дополнительных квалификаторов Google дает понять, что любые ссылки, созданные пользователями, должны иметь этот квалификатор.

Disallow, Noindex или Nofollow являются необязательными

Disallow, Noindex и Nofollow являются необязательными — роботы не обязаны выполнять какие-либо из этих команд. На самом деле, слово «команда» — это немного преувеличение.Эти директивы являются рекомендациями. Боты Google могут игнорировать любую из этих рекомендаций. Часто игнорирование этих команд является признаком более серьезной проблемы, связанной с тем, что роботы неправильно понимают, как сканировать ваш сайт. В этих ситуациях вы хотите исследовать, в чем заключается эта более серьезная проблема, и решать ее, а не просто переделывать ваши команды noindex, disallow или nofollow.

Кроме того, поскольку эти команды являются необязательными, вы не хотите полагаться на них для каких-либо важных аспектов вашего веб-сайта.Если часть веб-сайта не должна быть общедоступной или если вы хотите, чтобы часть вашего веб-сайта не попала в результаты поиска Google, вам следует рассмотреть альтернативы. Распространенной областью, где это становится проблемой, являются промежуточные веб-сайты, которые вы явно не хотите, чтобы боты Google сканировали, и определенно не хотите, чтобы они были проиндексированы. На промежуточном веб-сайте запрета или отсутствия индекса недостаточно для гарантии того, что боты покинут сайт в покое. Вместо этого вам потребуется логин для доступа к этому промежуточному сайту.Логин не является обязательным и не может быть проигнорирован, что означает, что боты не смогут его просканировать или проиндексировать.

Обобщение директив роботов

Самое важное, что нужно помнить, это две операции: сканирование и индексирование. Мы можем контролировать или влиять на них обоих, используя различные директивы.

Итак, вот эти директивы:

  • Disallow запрещает роботу сканировать страницу, файл или каталог.
  • Noindex запрещает роботу индексировать страницу.
  • Мета-nofollow указывает роботу не переходить по определенной ссылке или по всем ссылкам на странице.
  • Rel=”nofollow” (или rel=”sponsored” или rel=”ugc”) уточняет характер ссылки. как их использование повлияет на эффективность SEO вашего сайта. При их использовании убедитесь, что вы не блокируете роботов от просмотра важных частей вашего веб-сайта, таких как JavaScript, CSS или файлы изображений.Если вы сомневаетесь, не добавляйте никаких директив.

    Тестирование команд роботов

    Если вы решите использовать команды роботов, вам необходимо протестировать их, чтобы убедиться, что роботы правильно понимают команды. Хотя вы можете использовать инструменты сканирования, чтобы помочь в этом, более простой метод тестирования — в Google Search Console.

    Testing Robots.txt

    В Google Search Console вы можете проверить текущий файл robots.txt, чтобы увидеть, какие страницы в настоящее время перечислены как страницы, к которым вы не хотите, чтобы Google обращался.В настоящее время это недоступно в навигации в Google Search Console, но доступно как устаревший инструмент (доступ напрямую здесь).

    На этой странице вы увидите текущий файл robots.txt вашего сайта. Под файлом robots.txt вы можете ввести URL-адреса своего веб-сайта и проверить, не запретит ли Google сканирование этой страницы из-за файла robots.txt. В этом примере каталог wp-admin заблокирован для сканирования, но все остальные URL-адреса должны быть разрешены для сканирования.

     Проверка сканируемости и индексируемости

    Другой метод проверки способности роботов сканировать или индексировать страницу в Google Search Console – использовать инспектор URL.В новой консоли поиска Google введите URL-адрес, который вы хотите протестировать.

    После загрузки результатов в отчете о покрытии можно увидеть, разрешено ли сканирование и индексирование. В этом примере разрешены оба варианта, что является предполагаемым ответом. Если, однако, я указал noindex или disallow для этой страницы, ответы сканирования или индексирования должны быть «нет».

    Получить помощь

    Если вам нужна помощь, давайте поговорим, прежде чем вносить какие-либо изменения.Или, чтобы получить дополнительную информацию о noindex, nofollow, disallow и других технических темах SEO, обратитесь к Техническому руководству по SEO в мягкой обложке или Kindle на Amazon. Теперь доступно за  всего за 9,99 долл. США !

    Ресурсы

    SEO: noindex vs. nofollow — Справочный центр Siteimprove

    SEO-модуль Siteimprove уведомляет пользователей о страницах, исключенных с помощью noindex/nofollow. Эта статья призвана объяснить разницу между метатегами noindex и nofollow, когда их использовать и как эти теги влияют на веб-индексацию и страницы результатов поисковой системы (SERP).

    Как noindex, так и nofollow являются частью протокола исключения роботов (REP) , стандарта для управления индексацией веб-страниц на вашем сайте. Давайте рассмотрим несколько примеров noindex и nofollow и то, как они контролируют доступ и индексацию вашего сайта Google и другими поисковыми системами.

    Что такое noindex и когда его использовать?

    Обычно, когда робот Googlebot находит страницу, он считывает все ссылки на этой странице, затем извлекает эти страницы и индексирует их.Это основной процесс, с помощью которого робот Googlebot «сканирует» Интернет. Это полезно, поскольку позволяет Google включать все страницы вашего сайта, если они связаны друг с другом. Что делать, если вы не хотите, чтобы некоторые страницы вашего сайта отображались в индексе Google? Здесь применяется метатег noindex.

    Когда вы добавляете к веб-странице метатег noindex, он сообщает поисковой системе, что она не может добавить страницу в свой поисковый индекс, даже если поисковая система может сканировать страницу.

    Пример Noindex

    Статьи в разделе «Главные новости» CNN могут появляться только в течение нескольких часов, прежде чем они будут обновлены и перемещены в раздел «Статьи».В этом случае CNN хотел бы, чтобы индексировались полные статьи, а не раздел последних новостей с короткой частью полной статьи.

    Таким образом, вы можете добавить тег noindex к статьям, которые сейчас находятся в разделе «Экстренные новости», и удалить этот тег, как только статья перестанет быть экстренными новостями.
    Чтобы превратить обычные ссылки в ссылки без индекса, добавьте «noindex» в HTML-код:

     Текст ссылки 

    Что это nofollow и когда его использовать?

    Nofollow — это HTML-атрибут, который предписывает большинству поисковых систем воздерживаться от перехода по ссылке и, таким образом, передавать ценность странице, на которую указывает ссылка.Некоторые SEO-специалисты интерпретируют это как способ сообщить поисковым системам, что вы не доверяете или не можете поручиться за содержание ссылки, на которую ведет ссылка. Короче говоря, если вы хотите , чтобы поисковая система проиндексировала вашу веб-страницу в поиске, но вы не хотите, чтобы она переходила по ссылкам на этой странице; добавьте тег nofollow на свою страницу.

    Чтобы превратить обычные ссылки в ссылки nofollow, добавьте «nofollow» в HTML-код*:

     Текст ссылки 

    *Вы можете добавить код вручную, но многие CMS вставят его автоматически, когда это необходимо.Обратитесь к своему веб-мастеру за советом.

    Пример Nofollow

    Когда пользователи выполняют поиск в Google по фразам, связанным с новостями, CNN хотела бы, чтобы их разделы статей (со статьями) были на первых местах в поисковой выдаче, потому что статьи являются самым ценным активом CNN.

    Не имеет смысла размещать их раздел входа в систему вверху.

    Таким образом, чтобы сообщить Google, что статьи важнее входа в систему, CNN добавила тег nofollow к своей ссылке для входа.

    Примечание: Искатель Siteimprove не учитывает «noindex» или «nofollow» при определении содержимого для сканирования.Мы сканируем на основе настроек сканирования.

    Разница между метатегами Noindex и Nofollow

    Если вы проводите какое-то время, занимаясь цифровым маркетингом, вы, вероятно, сталкивались с различными терминами. Некоторые из них, такие как скорость страницы и цена за клик (CPC), довольно просты. Однако некоторые маркетинговые термины, особенно относящиеся к метатегам, могут немного сбивать с толку. Сегодня эксперты по цифровому маркетингу из Saba SEO, ведущей SEO-компании в Сан-Диего, обсуждают разницу между метатегами noindex и nofollow.

    Что такое тег Noindex?

    Тег «noindex» предназначен для того, чтобы делать то, что следует из его названия — сообщать поисковым системам, таким как Google, не индексировать или оценивать определенную веб-страницу. Это необходимо сделать, потому что веб-страницы по умолчанию автоматически устанавливаются в «индекс». Как правило, поисковые системы должны пропускать страницы, которые мало или вообще не имеют ценности для SEO, а также страницы, на которые вы не хотите, чтобы клиенты попадали при поиске того, что вы предлагаете. Общие страницы noindex включают:

    • Страницы благодарности
    • Страницы с конфиденциальным содержанием, предназначенные только для внутреннего доступа
    • Страницы только для членов

    Что такое тег nofollow?

    Тег «nofollow» относится только к ссылкам.Он говорит поисковым системам не учитывать ссылки на определенные страницы в целях качества ссылок. Хотя как внешние, так и внутренние ссылки могут быть полезны для целей ранжирования, бывают случаи, когда вы не хотите, чтобы ссылки имели большое значение, потому что они не имеют реальной ценности для SEO или могут быть сомнительными. Теги nofollow можно использовать для:

    • Комментарии в блогах, где легче размещать нерелевантные ссылки
    • Ссылки, которые являются рекламными или спонсорскими
    • Платные ссылки
    • Ссылки, которые появляются в пресс-релизах

    Примечание. Ссылки Nofollow не имеют значения PageRank (фактор Google), но они все же имеют определенную ценность, поскольку позволяют посетителям находить ваш контент или сайт.

    В двух словах, теги noindex не позволяют поисковым системам учитывать определенные страницы для целей ранжирования, а теги nofollow управляют ссылочной массой. То, как вы используете эти теги, будет зависеть от представленного контента и цели ваших различных веб-страниц, но конечной целью является оптимизация вашей онлайн-видимости, а также создание хорошего пользовательского опыта.

    Цифровым маркетологам, которым нужна помощь в использовании таких инструментов, как метатеги, для оптимизации своего присутствия в Интернете и повышения рейтинга в поиске, следует обратиться к доверенным профессионалам в Saba SEO, ведущей SEO-компании Сан-Диего.Мы предлагаем первоклассный опыт в области поисковой оптимизации, онлайн-маркетинговых кампаний, управления социальными сетями, веб-разработки и многого другого. Чтобы узнать больше о наших лучших в отрасли услугах, позвоните нам сегодня по телефону 858-277-1717.

    В чем разница между noindex и nofollow? – QuickAdviser

    В чем разница между noindex и nofollow?

    noindex означает, что веб-страница не должна индексироваться поисковыми системами и, следовательно, не должна отображаться на страницах результатов поисковой системы.nofollow означает, что пауки поисковых систем не должны переходить по ссылкам на этой странице. Он сообщает поисковым системам, как сканировать и индексировать ли страницу.

    Как мне не ставить индексный тег?

    Под вашим сообщением в мета-поле Yoast SEO просто нажмите на вкладку «Дополнительно»:

    1. Вкладка «Дополнительно» в мета-поле Yoast SEO содержит параметры индексации.
    2. Выберите Нет в раскрывающемся меню, чтобы не индексировать это сообщение.
    3. Просто ответьте Нет, если вы не хотите, чтобы Google переходил по ссылкам на этой странице.

    Как скрыть мою страницу Google?

    Вы можете запретить отображение страницы в поиске Google, включив метатег noindex в HTML-код страницы или вернув заголовок noindex в ответ HTTP.

    Как скрыть промежуточную страницу Google?

    Традиционно наиболее распространенным способом запретить Google индексировать промежуточный сайт было создание файла robots. txt, который не позволяет Google сканировать промежуточный сайт.

    Когда не следует индексировать страницу?

    Как правило, вы должны использовать noindex только в том случае, если страница имеет очень небольшую ценность для SEO (т.она считается тонкой по стандартам Google или представляет собой просто малоценный контент) или когда вы не хотите, чтобы страница была доступна через результаты поиска.

    Сканирует ли Google индексные страницы?

    Если страница по-прежнему отображается в результатах, возможно, это связано с тем, что мы не сканировали страницу с тех пор, как вы добавили тег. Вы можете запросить у Google повторное сканирование страницы с помощью инструмента проверки URL. Другой причиной также может быть то, что robots. txt блокирует URL-адрес от поисковых роботов Google, поэтому они не могут увидеть тег.

    Как запретить индексацию сайта поисковыми системами?

    Существует несколько способов запретить поисковым системам индексировать определенные страницы вашего веб-сайта. Рекомендуется тщательно изучить каждый из этих методов, прежде чем вносить какие-либо изменения, чтобы убедиться, что от поисковых систем блокируются только нужные страницы. Обратите внимание: эти инструкции заблокируют URL-адрес страницы от индексации для поиска.

    Как я могу скрыть свой сайт от поисковых систем?

    Но вам нужно сообщить Google об этом метатеге robots.Итак, если вы хотите эффективно скрыть страницы от поисковых систем, вам нужно, чтобы они проиндексировали эти страницы. Хотя это может показаться противоречивым. Есть два способа сделать это. Первый способ предотвратить размещение вашей страницы в списке — использовать метатеги robots.

    Как удалить страницу из поисковых систем?

    Если ваша страница уже проиндексирована и вы хотите удалить ее из поисковых систем задним числом, рекомендуется использовать метод метатега «Без индекса». Метатег «без индекса» — это строка кода, введенная в раздел заголовка HTML-кода страницы, которая сообщает поисковым системам не индексировать страницу.

    Как заблокировать страницу от появления в поиске Google?

    Заблокировать индексацию поиска с помощью «noindex». Вы можете запретить отображение страницы в поиске Google, включив метатег noindex в HTML-код страницы или вернув заголовок noindex в HTTP-запросе.

    Ссылки Follow и Nofollow: что нужно знать — SEO-маркетинг

    Разница между ссылками Follow и nofollow и их влияние на SEO максимизируйте свою цифровую производительность.

    Добавление их в набор инструментов SEO может помочь повысить профиль вашего веб-сайта. Давайте рассмотрим, что это такое, почему они используются и как они могут помочь вам лучше общаться с вашей целевой аудиторией.

    Что такое ссылки для перехода?

    Ссылки для перехода — это обратные ссылки (или входящие ссылки), которые сообщают роботам поисковых систем о переходе по гиперссылке. Этот тип входящей ссылки сигнализирует сканерам о релевантной и полезной ссылке. По сути, автор ручается за связанный сайт и говорит читателям: «Эй, я нашел эту страницу полезной.Возможно, ты тоже захочешь это проверить».

    Их также часто называют ссылками «Do Follow». Они говорят поисковым роботам перейти по ссылке, просканировать страницу и отдать должное ссылающейся странице. С каждой последующей ссылкой с других страниц связанная страница получает «голоса» за доверие. Чем больше голосов у страницы, тем больше вероятность того, что она получит повышение рейтинга в поисковой выдаче.

    Это лучшие из лучших, когда речь идет о внешних ссылках. Они нужны вам, потому что они направляют читателей на вашу страницу, а поисковых роботов — на ваш контент.Они также дают вам почувствовать вкус невероятно сладкого ссылочного сока, который нужен каждому сайту (подробнее об этом позже).

    Что такое ссылки Nofollow?

    Это другой вид входящих ссылок. В отличие от dofollow, они имеют атрибут nofollow в HTML-теге, сообщающий сканерам , а не , переходить по ссылке. С другой стороны, читатели видят то же самое, что и ссылка «подписаться». Это гиперссылка, которая открывает новую страницу при нажатии на нее. Единственный способ увидеть разницу — посмотреть на HTML-тег.

    Еще одно заметное отличие от do follows заключается в том, что nofollow-ссылки не начисляют баллы за доверие. Для поисковых систем такие ссылки ненадежны. По какой-то причине ссылающийся сайт не желает ручаться за понравившийся сайт. Поэтому они просто не переходят по гиперссылке.

    По крайней мере, так было до недавнего времени. В 2019 году Google изменил свою стратегию и теперь рассматривает атрибуты nofollow как «подсказки», а не указания игнорировать.

    Переходя на модель подсказок, мы больше не теряем эту важную информацию, но при этом позволяем владельцам сайтов указывать, что некоторым ссылкам не следует придавать вес одобрения первой стороны.” – Google

    Зачем использовать ссылки Nofollow?

    Если сканеры поисковых систем не «подсчитывают» nofollow-ссылки так же, как они подсчитывают ссылки для подписки, почему они вообще существуют?

    Изначально nofollow-ссылки были созданы для борьбы со спамом и злоупотреблением обратными ссылками.

    В начале 2000-х блоги начали зарекомендовать себя как прибыльный сектор онлайн-мира. Увидев это, спамеры воспользуются возможностью прокомментировать сообщения со ссылками на свой сайт.Это оказалось эффективной тактикой, и она распространилась со скоростью лесного пожара, нанеся ущерб поисковой выдаче.

    Пользователи больше не могли получать информацию, которую искали, из искаженных результатов поиска.

    Спам в комментариях сбил алгоритмы поисковых систем и привел к тому, что спамерские сайты заняли высокие позиции. Поскольку качественные сайты опустились в рейтинге, Google должен был найти способ предотвратить спам в комментариях и поддерживать достоверные результаты поиска. Итак, в 2005 году они помогли разработать своего рода супергероя: HTML-тег nofollow link.

    Общие Nofollow ссылки:

    • Комментарии
    • Форумы
    • Виджеты
    • Платные ссылки / Рекламный контент

    Когда использовать rel=»ugc» и rel=»sponsored»

    Ссылки Nofollow развивались с момента их создания. Теперь есть способы указывать исходящие ссылки с атрибутами HTML rel=»ugc» и rel=»sponsored».

    Rel=»ugc» предназначен для пользовательского контента. Комментарии и форумы — это типы пользовательского контента.

    Rel=»sponsored» для спонсируемого контента. Используйте это для рекламы, партнерских ссылок или в любое время, когда ссылки обмениваются на деньги или товары.

    Сканирование, индексирование и ранжирование

    Поисковые системы выполняют три основные функции: сканирование, индексирование и ранжирование.

    Сканирование

    Это когда Google развертывает роботов для проверки Интернета. Этих роботов часто называют «краулерами» или «пауками». Они сканируют содержимое и HTML-коды каждого URL-адреса, с которым могут столкнуться.

    Важно отметить, что поисковые роботы обнаруживают URL-адреса веб-сайтов по ссылкам. Они начинают с проверки нескольких страниц и переходят по обратным ссылкам на этих страницах, чтобы найти новые.

    Кроме того, они могут найти страницы с помощью файла карты сайта, который должен регулярно обновляться веб-мастером.

    Индексирование

    После обнаружения содержимого оно индексируется. Это означает сохранение его для ссылки, когда пользователь инициирует поиск.

    Не весь контент нуждается в индексировании. Одним из примеров этого является административная страница на веб-сайте, такая как политика конфиденциальности или страница доставки.

    Используя HTML-код noindex, веб-мастер может запретить индексацию нерелевантных страниц.

    Ранжирование

    Ранжирование — это когда поисковая система упорядочивает проиндексированный контент от наиболее релевантного к наименее релевантному каждый раз, когда пользователь выполняет поиск.

    Агентство цифрового маркетинга, работающее над оптимизацией поисковых систем, стремится повысить рейтинг компаний в поисковой выдаче. Бизнес хочет достичь своих потенциальных клиентов через Интернет. Однако цель поисковой системы — предоставить пользователю наиболее релевантный и полезный контент.

    Когда все три работают в гармонии, ранжирование становится естественным и имеет смысл.

    Почему важны обратные ссылки?

    Проще говоря: потому что они сообщают поисковым роботам, что сайт подтвержден и считается надежным источником.

    Чем больше веб-сайтов ссылается на ваш контент, тем больше вы доверяете пользователям и Интернету в целом. Поисковые системы считают обратные ссылки «голосами». Чем больше у вас их, тем надежнее ваш сайт и, следовательно, выше вероятность того, что рейтинг вашего сайта повысится.Более высокий рейтинг означает больший трафик, больше посетителей, больше продаж и больше успеха.

    Как создать обратные ссылки

    Мы знаем, что они являются важной частью создания успешного веб-сайта, но как нам их получить?

    Создание качественного контента

    Это лучший способ органически получать обратные ссылки. Если вы публикуете исключительный контент, другие захотят дать на него ссылку.

    Вот список примеров качественного контента, составленный генеральным директором NeoMam Studio Жизель Наварро.Группы в списке создавали инновационный контент, который заставлял людей делиться своими страницами с помощью обратных ссылок.

    Если вы можете создавать привлекающий внимание, заставляющий задуматься и достойный ссылок контент, другие это заметят. А еще лучше, другие будут ссылаться на него.

    Говорите громко

    • Оставляйте комментарии к сообщениям в блоге. Убедитесь, что это хорошо продуманные идеи, которые продвигают обсуждение.
    • Отвечать на форумах. Подобно комментариям, ответы должны содержать достоверную информацию.
    • Дайте отзывы о чужом продукте или услуге.Если вы даете кому-то похвалу, они могут захотеть поделиться ею на своем сайте и, возможно, предоставить ссылку на ваше одобрение.

    Свяжитесь с нами по телефону

    Свяжитесь с другими владельцами сайтов и попросите их поставить ссылку на ваш сайт! Чтобы это работало, вам нужно будет обосновать, как ваш сайт повышает ценность их контента.

    Что вам нужно знать

    Поскольку с 1 марта Google рассматривает атрибут NoFollow как подсказку для индексации и сканирования, самое время более внимательно изучить ссылки nofollow, как внутренние, так и внешние, и обсудить преимущества, которые они предоставляют, и различные способы их использования.

    На прошлой неделе в Semrushchat мы обсуждали ссылки nofollow и ссылки follow (некоторые называют их ссылками dofollow). Стало совершенно очевидным, что в сообществе существует много путаницы по целому ряду вопросов, связанных с nofollow, поэтому мы решили разбить основы и дать советы по созданию ссылок , которые должен знать каждый оптимизатор и линкбилдер.

    Что такое Nofollow-ссылки?

    Google представил опцию rel=»nofollow» в 2005 году для блоггеров, которые боролись с людьми, использующими спам в комментариях, чтобы попытаться создать ссылки в надежде ранжироваться по определенным ключевым словам, таким как «приглашения на свадьбу».«С тех пор Google предлагает использовать платные ссылки атрибута (практика, которая может привести к тому, что вы будете оштрафованы Google).

    Атрибут nofollow указывает поисковым системам не переходить по помеченной исходящей ссылке, что, по сути, означает, что веб-сайт не поддерживает ссылку.

    Как выглядит ссылка Follow и Nofollow

    Nofollow используется в HTML исходного кода. Многие CMS предоставляют опцию nofollow при создании ссылок, но если вам нужно кодировать их вручную, у нас есть несколько примеров для вас.

    Вот как выглядит ссылка для перехода:

    Текст привязки идет 

    Вот как выглядит ссылка nofollow: 

    Текст привязки

    Параметры ссылки Nofollow для Google

    способы помочь Google определить характер различных ссылок.

    Google предлагает использовать спонсируемый атрибут для идентификации ссылок на вашем сайте, которые были созданы в рамках рекламных, спонсорских или других компенсационных соглашений — это предпочтительный метод, который они запрашивают, если ссылки каким-либо образом оплачиваются.

    Атрибут спонсирования выглядит следующим образом: 

    текст привязки

    rel=»ugc»

    Google рекомендует помечать ссылки на пользовательский контент (UGC), например комментарии и сообщения на форуме, как UGC.Однако они добавили, что если вы хотите отметить и вознаградить заслуживающих доверия участников, которые постоянно вносят высококачественный вклад, вы можете удалить этот атрибут из ссылок.

    Атрибут UGC («пользовательский контент») выглядит следующим образом: 

    текст привязки

    Google предлагает использовать rel=»nofollow» следующим образом: «Используйте значение nofollow, когда другие значения неприменимы, и вы не хотите, чтобы Google связывал ваш сайт с вашим сайтом или сканировал связанную с ним страницу.(Для ссылок на вашем собственном сайте используйте robots.txt, как описано ниже.)

    Естественные и неестественные входящие и исходящие ссылки

    Google оценивает ссылки, поступающие на каждый веб-сайт, чтобы определить, выглядят ли ссылки естественными — обычный ссылочный профиль со ссылками с соответствующих веб-сайтов, которые включают в себя ссылки для перехода и nofollow, а также обычное количество ссылок. Для всего неестественного следует использовать тег nofollow.

    Неестественные ссылки

    Если Google обнаружит неестественное количество ссылок, ссылок, которые кажутся платными, или ссылок, которые выглядят так, как будто они были получены для игры с системой.Примеры ссылок, которые могут повлечь за собой штрафные санкции или ручные меры: 

    • Покупка или продажа ссылок
    • Обмен ссылками
    • Гостевые посты с якорными текстовыми ссылками, богатыми ключевыми словами
    • Автоматическое создание ссылок
    • Каталоги Dofollow
    • 38 Пресс-релизы

      В последнее время Google также раздает ручные действия по исходящим ссылкам в гостевых сообщениях. Следует отметить, что один издатель, получивший от Google уведомление о ручном действии, сказал, что на их сайте не было указано, что они принимают гостевые публикации, а в исходящих ссылках использовался фирменный анкорный текст.Узнайте, как разнообразить анкорный текст, чтобы он выглядел более естественно в этом посте.

      Google отслеживает входящие и исходящие ссылки с вашего сайта. Nofollow использовался для предотвращения ручных действий, но Google недавно заявил: «Для целей сканирования и индексирования nofollow станет подсказкой с 1 марта 2020 года». Это то, что нужно иметь в виду; эти подсказки могут помочь или навредить вам.

      В недавнем Semrushchat А. Дж. Гергич объяснил: «Google перерос первоначальную цель rel=»nofollow», и эти обновления — способ признать это и решить эту проблему.rel=»ugc» полезно для блоггеров и издателей, и мы планируем реализовать его на нескольких клиентах. В настоящее время мы не занимаемся платным размещением ссылок/контента, поэтому на данный момент у нас нет потребности в «спонсируемых». Однако я ожидаю, что более крупные издатели, такие как Forbes, примут его».

      Мы связались с AJ и попросили его совета по использованию новых атрибутов:

      «Большое изменение здесь заключается в том, что rel=»nofollow» раньше было универсальным атрибутом по умолчанию. Теперь вы должны использовать его только тогда, когда теги UGC или Sponsored не применяются.Это должно быть довольно редко.

      • Используйте «rel=ugc» в разделе комментариев в своем блоге или на форумах.
      • Используйте rel=»sponsored» для рекламных материалов, платных гостевых постов или размещения ссылок.
      • Используйте rel=»nofollow», когда вы не можете поручиться за контент, который не совсем соответствует пользовательскому контенту или спонсируется».

      NoFollow и NoIndex: в чем разница?

      Мы заметили, что существует путаница в отношении того, как запретить Google индексировать страницу, поэтому мы хотим убедиться, что наше сообщество знает разницу между nofollow и noindex и какие у них есть варианты.

      Как указано выше, nofollow можно использовать для отдельных ссылок. Nofollow также можно добавить в заголовок страницы, который сообщает поисковым системам о запрете перехода по всем ссылкам на этой странице:

      Если вы используете это в надежде, что Google не будет сканировать страницы на вашем собственном сайте с помощью этой директивы, имейте в виду, что в прошлом для Google было бы знаком не сканировать страницу по определенной ссылке, но это не мешает Google сканировать страницу по-другому.И если Google теперь относится к nofollow как к «подсказкам», то эта стратегия вам не подойдет.

      Если вы не хотите, чтобы Google сканировал или индексировал страницу вашего сайта, вам придется использовать тег noindex.

      Метатег Noindex

      Тег noindex сообщает поисковым системам, что вы не хотите, чтобы страница включалась в результаты поиска. Google говорит: «Когда робот Googlebot в следующий раз просканирует эту страницу и увидит тег или заголовок, робот Googlebot полностью исключит эту страницу из результатов поиска Google, независимо от того, ссылаются ли на нее другие сайты.

      Они также заявляют: «Чтобы директива noindex действовала, страница не должна быть заблокирована файлом robots.txt. Если страница заблокирована файлом robots.txt, сканер никогда не увидит директиву noindex, и страница по-прежнему может отображаться в результатах поиска, например, если на нее ссылаются другие страницы».

      Вы можете добавить тег noindex в раздел заголовка HTML для конкретной страницы, например: 

      Или вы можете добавить его с помощью X -robots-tag HTTP-заголовок:

      X-Robots-Tag: noindex

       С X-robots-tag вы не можете индексировать всю страницу или определенные элементы страницы.

      Избегайте использования Nofollow, чтобы запретить Google индексировать страницу

      В прошлом люди использовали nofollow, чтобы попытаться запретить Google сканировать и индексировать страницу, но это не самая эффективная стратегия; noindex — это путь.

      «Никогда не был поклонником использования rel=»nofollow» для контроля сканирования. Однако многие сайты электронной коммерции используют его как быстрое «исправление» для многогранной навигации. Если вы это сделаете, вы захотите внимательно следить за поведением Google при сканировании ». — AJ Ghergich @SEO

      «Обычно я слишком осторожен, и если я действительно не хочу, чтобы страница была видна, я использую как «nofollow», так и «noindex». .«Конечно, бывают случаи, когда в этом нет необходимости, но мне нравится пытаться охватить свои основы». — Стиви Ховард @MyMktingSense

      Сканирование против индексации против ранжирования

      не понимаю разницы между индексированием и ранжированием». — Райан Джонс @RyanJones

      Мы заметили ту же путаницу, поэтому снова попросили А. Дж. Гергича разъяснить нам. Вот что он сказал:

      «Очень легко спутать сканирование, индексирование и ранжирование.Важно помнить, что это три разных процесса.

      • Сканирование — Google переходит по ссылкам, чтобы находить новый или обновленный контент в Интернете.
      • Индексирование — Google анализирует и сохраняет всю просканированную информацию и контент.
      • Рейтинг — Google просматривает контент и информацию в своем индексе, которые лучше всего соответствуют поисковому запросу пользователя.

      Хотя на первый взгляд все очень просто, оно может быстро усложниться.Например, Google заявляет…

      «Страницы, заблокированные в robots.txt, не будут сканироваться, но все же могут быть проиндексированы, если на них ссылается другая страница. (Google может сделать вывод о содержании страницы по ссылке, указывающей на нее, и проиндексировать страницу, не анализируя ее содержимое.)’ ”

      Использует ли Google в настоящее время rel=»nofollow» в качестве подсказки?

      Барри Шварц спросил Джона Мюллера и Гэри Иллиса, каких изменений следует ожидать 28 февраля.

      «@dannysullivan @JohnMu есть идеи, сколько изменений мы увидим с изменением nofollow от 1 марта, которое теперь можно использовать для сканирования и индексирования?» — Барри Шварц @rustybrick

      «@methode может знать, но он немного занят .Кроме того, «изменение, которое вы видите» (во внешних трекерах, SEO-/BHW-твиттере и т. д.) иногда отличается от фактического изменения :)» — John @johnmu

      «(а если серьезно, нам нечего объявить об этом На самом деле ничего. *ничего*)» — Гэри Иллиес @methode

      Мы спросили наше сообщество в чате, видели ли они какие-либо изменения на своих веб-сайтах, и большинство полагало, что любые изменения, которые они видели с 1 марта, были результатом их усилия по SEO или недавние изменения алгоритма. Мы не знаем, использовал ли Google их в качестве подсказок все это время или будут какие-то серьезные изменения, которые можно будет измерить.Что мы знаем, так это то, что они хотят, чтобы мы использовали атрибуты nofollow в качестве лучших практик.

      «Мы заметили небольшие изменения в видимости сайта для ряда наших клиентов, но трудно определить, является ли это результатом изменения Google в том, как они обрабатывают nofollow. Мы действительно видели, что большинство изменений связано с подтвержденными обновлениями основного алгоритма», — Блейк Коррингтон @BRCorrington

      «Вы были бы маргариткой, если бы сделали это. 🙂 Одна из немногих вещей, которым я верю от агентов по связям с общественностью GOOG: существует более 200 сигналов ранжирования.Так что, если использование этого оказало влияние, мы все обречены». — Марианна Суини @msweeny

      «Вставьте здесь корреляцию, а не причинно-следственную связь. Мы наблюдаем повышение рейтинга по всем направлениям и во многих категориях. Однако невозможно соотнести изменения Nofollow с этими рейтингами, потому что в игру вступает множество других факторов. Google заявил, что теперь рассматривает эти подсказки и «другие сигналы как способ лучше понять, как правильно анализировать и использовать ссылки в наших системах».”— AJ Ghergich @SEO

      Google расширил это утверждение, заявив, что одной из причин этого изменения было то, что эти ссылки предоставляют ценную информацию — например, как анкорный текст описывает контент, на который они ссылаются — и что, просматривая все ссылки, которые они находят , они могут начать распознавать «неестественные шаблоны ссылок». Как правило, мы относимся к ним так же, как к Nofollow, и не учитываем их в целях ранжирования.Таким образом, эти подсказки открывают перед Google дополнительные возможности для обучения, но мы можем не увидеть большого эффекта сразу».

      Как проверить ссылки Nofollow?

      Если вы хотите узнать, используются ли теги nofollow на странице, вы можете сделать это вручную — от страницы к странице. Чтобы начать, просто перейдите на страницу, щелкните правой кнопкой мыши и выберите «просмотреть исходный код страницы:»

      Затем нажмите Control/Command F и найдите nofollow. Нажимая на стрелки, вы можете увидеть все nofollow на странице.

      Расширение SEO Quake

      Это расширение позволит вам быстро увидеть все внешние ссылки, в том числе подписки и ссылки.не следует.

      Semrush Domain Analytics

      Если вы хотите увидеть разницу между подпиской и отказом от подписки для своего сайта или сайта конкурента, вы можете использовать аналитику домена Semrush.

      Подходят ли ссылки Nofollow для линкбилдинга?

      Многие считают, что построение ссылок имеет значение, только если вы получаете ссылку для перехода. Хотя качественные ссылки для перехода могут быть полезны для SEO, у получения ссылок nofollow все же есть явные преимущества. Вот лишь некоторые из них:

      • Увеличение трафика — Хотя многие крупные сайты используют nofollow для всех исходящих ссылок на своем сайте, они способны отправлять огромные объемы трафика.
      «Основной способ определения ценности ссылок NoFollow — это количество и качество реферального трафика, который они доставляют вашему клиенту. Точка». — AJ Ghergich @SEO
      • Представление бренда — Упоминание на качественных сайтах, релевантных вашей аудитории, отлично подходит для повышения узнаваемости бренда.
      • Создание доверия — Ссылки на качественные сайты могут вызвать доверие у вашей целевой аудитории. Еще один бонус: чем больше потребителей увидят название вашего бренда, тем больше они начнут доверять вам.
      • Доверие может привести к ссылкам для перехода — Один сайт может использовать ссылку nofollow на ваш сайт, но их читатели могут оценить вашу информацию и сделать ссылку на вас с помощью ссылки для перехода.
      • Естественный профиль обратных ссылок — Если вы создаете ссылки, вы не можете получить слишком много ссылок для перехода за один раз, потому что это выглядит неестественно. Вам нужно иметь как nofollow, так и follow, чтобы выглядеть естественно.
      • Избегайте штрафов за исходящие ссылки — Если вы не следуете ссылкам, вам не нужно беспокоиться о том, что Google применит ручное действие к вашему сайту для ссылок.
      • Качественный трафик — Трафик — это хорошо, но все хотят, чтобы трафик приводил к продажам, поэтому, если ссылка nofollow привлекает потенциальных клиентов и продажи, это очень ценная ссылка.
      «Привлекают ли ваши nofollow-ссылки квалифицированный трафик? Если да, то это хорошие ссылки». — Аймен Лукил @LoukilAymen

      Как использовать Semrush для проверки наличия проблем со ссылками nofollow

      Если вы не уверены, как nofollow используется или не используется на вашем сайте, воспользуйтесь инструментом Semrush Site Audit. предоставит вам ценную информацию, которая вам нужна.Давайте посмотрим на пример. Ниже вы увидите, что на этом сайте есть 10 внутренних ссылок, использующих nofollow; это может не быть проблемой, если вы ссылаетесь на страницу входа, но в данном случае это были ссылки на главную страницу их блога. Это нужно исправить (как и неработающие внутренние ссылки).

      1158 исходящих ссылок nofollow были сделаны правильно.

      Аналитика обратных ссылок

      Выше я упомянул инструмент Domain Analytics, который включает нашу проверку обратных ссылок, но я хотел отметить, что вы можете просматривать и экспортировать все ваши nofollow-ссылки, а также отфильтровывать рекламные и UGC-ссылки. чтобы быстро увидеть, как ваш сайт управляет исходящими ссылками.

Leave a Reply