NOINDEX и NOFOLLOW – что такое и как использовать

Доброго времени суток, уважаемые читатели. Часто сталкиваюсь с тем, что у многих начинающих вебмастеров и блоггеров полная каша в голове по поводу использования noindex и nofollow. Давайте разберемся что это такое, с чем едят и расставим все точки над i.

noindex и nofollow

Стоит начать с того, чтобы в дальнейшем у вас никогда не было путаницы в голове, что и noindex и nofollow используют в двух относительно разных значениях в web-документе.

 

Первое – это внутри мета-тега ROBOTS (не путайте с файлом robots.txt) в значении атрибута content. Данный мета-тег имеет отношение ко всему документу в целом. Второе, используется только nofollow – внутри тега <a> и имеет отношение к конкретной ссылке. Про тег noindex немного другая история, и о ней мы также сегодня поговорим. Стоит также отметить, что я буду рассматривать использование nofollow и noindex только в двух поисковых системах – Яндекс и Google.

NOINDEX и NOFOLLOW в мета-теге ROBOTS

Мета-тег robots отвечает за всю страницу целиком. Через данный мета-тег можно запрещать или разрешать индексировать контент страницы.

Noindex отвечает за запрет индексации текста на странице.

Nofollow отвечает за запрет индексации ссылок на странице.

 

Используются данные значения следующим образом:
<meta name="robots" content="noindex, nofollow" />
что означает – данную страницу нельзя индексировать вообще.

Могут быть и такие значения:

<meta name="robots" content="index, nofollow" />
можно индексировать контент, но игнорировать ссылки на странице, т.е. не индексировать их.

Или так:

<meta name="robots" content="noindex, follow" />
не индексировать контент, но учитывать ссылки.

Более подробно про мета-тег robots вы можете прочитать в моей статье Мета тег Robots и файл Robots.txt – как управлять индексацией страниц сайта.

NOFOLLOW в ссылках

Nofollow используется как значение атрибута rel в теге <a>. И отвечает за индексацию каждой конкретной ссылки на странице.
<a href="url" rel="nofollow">ссылка</a>
Атрибут rel показывает отношение данного документа к документу, на который ссылается.
В данном случае, указывая атрибуту rel значение nofollow, мы просим поисковую систему не переходить по внешней ссылке, а также подчеркиваем то, что мы не отвечаем за содержание, на которое ссылаемся.
По ссылкам, оформленным с данным значением, не передается авторитет нашей страницы, другими словами не передается тИЦ и Page Rank. Однако стоит также учитывать и то, что в случае с PR вес все же уходит, но не на сайт, на который мы ссылаемся, а в никуда в прямом смысле этого слова. По поводу тИЦ точной информации о том, уходит вес или остается на сайте - нет.
Остановимся подробнее на распределении и передаче веса в Google.

Итак, абсолютно не важно, сколько ссылок у вас имеют атрибут rel="nofollow", а сколько без него. Если на странице стоит 10 ссылок, то каждая ссылка получит часть авторитета вашей страницы, и каждая из них передаст этот вес, но если в одном случае вес передастся на конкретный сайт, то в другом случае – вес просто уйдет в никуда.

Распределение веса с nofollow и без

Давайте представим немного, как видит всемирную паутину поисковая система. Все сайты связаны между собой ссылками, абсолютно все. Первый ссылается на второй, второй на третий … тысячный на тысяча первый и миллион какой-то в итоге обязательно будет ссылаться на первый.

 

Таким образом цепочка замыкается, все сайты находятся в цикле, и вес, который передает первый сайт всегда возвращается к нему через сотни и тысячи других сайтов. Также не забываем, и я уже писала об этом в статье про перелинковку, что этот вес передается не единожды, а постоянно, при этом с течением времени вес становится только больше, все сильнее увеличивая свой авторитет. Именно на этом принципе строится перелинковка сайта.

 

Теперь представим, что первый сайт закрыл свои ссылки атрибутом rel="nofollow". Вес не перейдет на второй сайт, а утечет в никуда, и второй сайт не получит ту часть веса, которую должен был, не сможет передать его дальше по цепочке, и в итоге, пройдя весь цикл, Х-какой-то сайт, который должен был передать вес на первый сайт,  передаст его в значительно меньшем количестве, чем мог бы. Итак, каждый раз не получая ту часть веса, которую вы самостоятельно пускаете в никуда, закрывая свои ссылки атрибутом rel="nofollow", сайт не может передать вам ее, из чего следует, что закрывая свои ссылки, вы сами лишаете себя увеличения веса, и такого показателя, как PR.

 

Чтобы было проще это понять, представим, что каждая ссылка передает вес, равным единице.

Передача веса ссылок с nofollow и без

Таким образом, если первый сайт не закрыл ссылку атрибутом rel="nofollow", то в конце цикла получит больший вес от входящих ссылок, чем в случае, если исходящие ссылки будут закрыты.

 

Получается, закрывать ссылки не выгодно?

Это действительно так, но только в том случае, если мы ссылаемся на качественные авторитетные ресурсы.

Закрывать ссылку невыгодно, если вы действительно, по настоящему рекомендуете своим читателям статью, на которую ссылаетесь, свою страничку в социальной сети, на свою ленту RSS. Глупо закрывать ссылки на свои же страницы в социальных сетях, когда рекомендуете своим читателям подписаться на обновления блога через них. Ведь это же ваши собственные страницы, ваша собственная RSS лента, в которой транслируется ваше же содержание. Разве вы сами не отвечаете за него?

Но есть ситуации, когда действительно необходимо закрывать ссылки значением nofollow. Обратимся к источникам, Яндекс и Google, что они говорят по этому поводу?
Выдержка из раздела Помощь Яндекса:

Яндекс и nofollow

Выдержка из раздела Справка Google:

Google и nofollow

Мы должны закрывать ссылки в тех разделах своего сайта, где любой пользователь может оставить свою ссылку, за которую мы не сможем поручиться, гарантировать, что там качественное содержание.

 

Дополнительно к этому Google рекомендует обозначать продажные ссылки атрибутом rel="nofollow". Также Google пишет, что с помощью nofollow мы можем указать роботу на закрытые разделы нашего сайта, но уточняет, что есть и другие способы указывать на это.

 

Также мне хотелось бы уделить внимание ещё одному моменту. Некоторые ярые борцы за закрытые ссылки ставят rel="nofollow" не только в самих ссылках, т.е. в теге <a>, но и везде, на что только хватает фантазии. И в теге <iframe>, и <script>, и в теге <img>.

 

Давайте не будем выдумывать свои собственные стандарты, а обратимся к существующим, которые разрабатывает международная организация W3C.

Значение rel="nofollow" можно использовать только в теге <a>, и в других тегах его использовать нельзя!
Итак, мы выяснили, когда стоит пользоваться атрибутом ссылки rel="nofollow", а когда это не целесообразно. Также мы больше не будем вставлять его никуда, кроме одного единственного тега, обозначающего ссылку. Теперь уделим внимание тегу noindex.

NOINDEX – рудимент от Яндекса

Когда-то Яндекс не понимал значение nofollow, и поэтому придумал свой собственные тег
<noindex>что-то внутри</noindex>
для того, чтобы можно было закрывать неугодные ссылки с его помощью. Все, что находилось внутри данного тега игнорировалось роботом Яндекса. Но с тех пор утекло немало воды, Яндекс повзрослел и начал понимать атрибут rel="nofollow". Случилось это ещё весной 2010 года. Именно тогда тег noindex потерял свое значение в качестве инструмента для закрытия ссылок. Но при этом осталось другое значение – скрывать текстовый контент. Выдержка из раздела Помощь Яндекса:

Яндекс и noindex

Им рекомендуется скрывать служебные участки текста. О каких служебных участках идет речь – не совсем ясно, но совершенно очевидно, что к ссылкам этот тег теперь не имеет никакого отношения. Т.е. получается, если мы поместим ссылку в данный тег:
<noindex><a href="url">анкор ссылки</a></noindex>
то Яндекс учтет все, кроме анкора ссылки. Т.е. ссылка будет учтена, не будет учтен только текст. Таким образом скрывать ссылки тегом noindex не имеет никакого значения.
Можно смело отказаться от использования данного тега, тем более, учитывая ещё и его невалидность. Ведь по сути такого тега вообще не существует. Как мы знаем, стандарты HTML разрабатывает международная организация W3C, и в спецификации к языку HTML нет такого тега, это полностью выдумка Яндекса.

 

Остался ещё один вопрос, на который мне хотелось бы обратить ваше внимание. Часто, когда я пытаюсь объяснить то, о чем написала в данной статье, мне возражают:

"Я делаю анализ сайта таким-то инструментом, и он показывает мне, что у меня ссылки не закрыты…

или

инструмент такой-то рекомендует закрыть ссылки тегом noindex.
Вы можете верить всем этим инструментам, это ваше полное право, но не лучше ли верить официальной документации поисковиков, и не лучше ли думать собственной головой?
Удачи в оптимизации сайтов.

Запись опубликована автором в рубрике Как создавать сайты с метками , .

NOINDEX и NOFOLLOW – что такое и как использовать: 22 комментария

  1. Mylitta

    А вот у системы комментирования Дискус все ссылки по
    умолчанию закрыты, да и в большинстве случаев даже сами комментарии не
    индексируются. Хотя бывают и исключения.
     

    1. Максим Бойко

      В принципе, на сайте тоже можно закрыть все ссылки. Я так сделал на своём блоге с помощью ajax. Теперь, не создаются дубли одних и тех же страниц. Так же и в сайдбаре — большинство элементов закрыты от индексации. Вообще, смотрю, что уже многие поступают также.

  2. dazoev

    спасибо за статью! всегда закрывал через нофоллоу. а оказывается это неправильно было (

  3. Alex

    Главное правильно применить и не закрыть от поисковиков нужную информацию от индексации.

  4. Ирина

    То есть получается, что тег 
    noindex вообще не закрывает ссылки? Мы их просто выделяем для робота Яндекса, чтобы он их быстренько нашел…

  5. Olegushka1

    Статья очень полезная до этого не очень понимал сути данных ссылочных атрибутов и атрибута метатега роботс. Все написано легким, доступным языком, автору уважуха. Прошу заметить, что на всем сайте инфомация преподнесена грамотно и верно. Пожалуй пока единственный сайт, на котором все написано знающим человеком, а не рерайтером-дилетантом. Поставил сайт в закладки. Дальнейших успехов.

  6. Павел

    Хорошая статья, все подробно и по полочкам разложено. Вам пора название блога менять. На дилетанта Вы не похожи 🙂

  7. Сергей

    Меня очень повеселила фраза, что вес утекает вникуда — очень смешно. Если стоит нофолоу, то вес не утекает, в том то и дело, просто ссылка не учитывается тем поисковиком, который воспринимает этот тег. Далее, если ставят на странице тег нофолоу, значит люди не от тупости это делают, а лишь для того, чтобы сохранить вес остальных ссылок, ведь всем понятно, что если на странице 15 ссылок дуфолоу, то вес распределяется на всех. Так вот чтобы увеличить вес каждой ссылки нужно уменьшить их количество. А значит нужно просто часть из них закрыть.
    Ну и еще речь шла о бесполезности закрытия ссылок, но вы все таки закрываете тегом нофолоу, что противоречит самой статье. Для начинающих это будет обманом.
    А вот выдержки формулировок сделаны с толком, пояснения доходчивые. Но написано более чем доходчиво, просто в некоторых местах двухсмысленно.

    1. SEO-Дилетант'ка Автор записи

      Сергей, спасибо за комментарий. В SEO, как и в любой области знаний, есть разные мнения, каждый опирается на свой опыт или опыт коллег. Рада, что повеселила вас:).
      Несмотря на то, что статье почти 5 лет, она как никогда актуальна и дает правильные базовые понятия SEO.
      Ваше замечание: «Ну и еще речь шла о бесполезности закрытия ссылок, но вы все таки закрываете тегом нофолоу, что противоречит самой статье. » очень странно, потому что с тех пор, как я изучила эту тему, я не закрываю тегом nofollow ссылки. В старых статьях, написанных до этой, вы можете найти закрытые ссылки, после — нет. Я это не практикую, чем и показываю пример. Ваше замечание голословно.

  8. Женщина

    Цитирую из статьи:
    «Получается, закрывать ссылки не выгодно?
    Это действительно так, но только в том случае, если мы ссылаемся на качественные авторитетные ресурсы.»
    Вопрос:
    То есть, если я правильно поняла, чем на более качественные авторитетные ресурсы мы ссылаемся, тем более нам это выгодно?

      1. Lidiya

        А не пробовали, для сравнения, по двум примерно одинаковым по весу страницам провести эксперимент. У одной убрать все ссылки, а у второй сделать ссылки на, например, гугл и яндекс. И через месяц-два посмотреть результаты. Понимаю, что эксперимент не чистый, но все-таки.

        1. SEO-Дилетант'ка Автор записи

          Lidiya, есть блогеры, которые проводят различные эксперименты. Я к их числу не отношусь. Я беру свой опыт из реальных проектов, которыми занимаюсь, аналитической работы, и да, я читаю подобных блогеров, и, пропуская через призму своего опыта, беру на вооружение знания, которые они получили в результате экспериментов.

  9. Виталий

    Здравствуйте. Это не комментарий а скорей вопрос по теме статьи.
    Я заметил в вебмастере от яндекса среди входящих ссылок ссылку на мой сайт с ответов от маил ру:
    Как видим, она закрыта на сайте маил ру значением rel=»nofollow».
    Не могу понять, страница все же ссылается на мой сайт и ссылка индексируется, раз она отображается в вебмастере? Т.е. rel=»nofollow» не сработал для яндекса?
    И если это так, передается ли вес моей странице?
    Буду благодарен, если сможете разъяснить ситуацию.

    1. SEO-Дилетант'ка Автор записи

      Здравствуйте, Виталий. Стоит обратить внимание на то, что Яндекс и Google по разному обрабатывают данное значение. Яндекс в своей справке, на которую я даю ссылку в статье, не пишет, что не переходит по такой ссылке, и не передает вес. Яндекс пишет только о том, что все немодерируемые ссылки лучше всего закрывать nofollow, что и делает майл.ру. А вот Google пишет, что не будет переходить по такой ссылке, и не будет передавать вес.

  10. артем

    Здравствуйте!
    Если на странице много ссылок на один и тот же сайт, но на разные его страницы, как быть? Тоже не использовать rel=»nofollow» совсем, или, всё-таки, использовать эту конструкцию на некоторых?

    1. SEO-Дилетант'ка Автор записи

      Здравствуйте, Артем. Мне сложно дать однозначный ответ на ваш вопрос без конкретных примеров. Если на уровне рассуждений, то надо определиться скрывать или не скрывать, и после этого либо скрывать все, либо не скрывать все.

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *