Правильный noindex. NOINDEX и NOFOLLOW – что такое и как использовать. Совместное использование тега и атрибута noindex nofollow

Статья для тех, кому лень читать справку по GoogleWebmaster и ЯндексВебмастер

Закрывание ненужных страниц веб-ресурса от поисковой индексации очень важно для его SEO-оптимизации, особенно на начальном этапе становления сайта или блога «на ноги». Такое действие способствует продвижению в и рекомендовано к применению для служебных страниц. К служебным страницам относятся технические и сервисные страницы, предназначенные исключительно для удобства и обслуживания уже состоявшихся клиентов. Эти страницы с неудобоваримым или дублирующим контентом, который не представляет абсолютно никакой поисковой ценности. Сюда входят - пользовательская переписка, рассылка, статистика, объявления, комментарии, личные данные, пользовательские настройки и т.д. А, также - страницы для сортировки материала (пагинация), обратной связи, правила и инструкции и т.п.
  • Метатег robots
  • Метатег robots

    Для управления поведением поисковых роботов на веб-странице, в существует метатег robots и его атрибут content. закрытия веб-страницы от поисковой индексации,

  • Метатег robots
  • Почему метатег robots лучше файла robots.txt
  • Многие оптимизаторы знают, что показатели ТИЦ и PR зависят в первую очередь от количества и качества ссылок на сайт. Но если ваш ресурс ссылается на другие, особенно не подходящие по тематике, то его вес падает. В этой статье будет рассказано, как правильно закрыть ненужные внешние ссылки и текст от индексации с помощью тегов .

    Noindex

    Тег noindex используется, чтобы запретить индексацию какой-то определенной части текста. Следует помнить, что ссылки и изображения этот тег от поисковиков не закрывает. Если все-таки попытаться закрыть этим тегом анкор со ссылкой, то под индексацию не попадет только анкор (словосочетание), а сама ссылка однозначно попадает в индекс.

    Noindex запрещает индексацию части кода, находящуюся между открывающим и закрывающим тегами. Вот пример:

    Этот текст Яндекс не индексирует

    Естественно, его не стоит путать с мета-тегом ноиндекс, который прописывается вначале страницы, они имеют различные задачи. Если взять мета-тег , то он запрещает индексирование всей страницы и переход по ссылкам. Этот запрет можно также прописать в файле robots.txt и такие страницы поисковыми роботами не будут учтены.

    Валидный noindex

    Некоторые HTML-редакторы noindex не воспринимают, поскольку он не является валидным . К примеру, в WordPress визуальный редактор его попросту удаляет. Но валидность тегу все же придать можно:

    Текст закрыт валидным ноиндекс

    Если в HTML-редакторе прописать тег в такой форме, то он будет абсолютно валиден и можно не бояться, что он исчезнет. Тег noindex воспринимает только поисковый бот Яндекса, робот Гугла на него абсолютно не реагирует.

    Некоторые оптимизаторы допускают ошибку, когда советуют закрыть все ссылки такими тегами noindex и nofollow, но об этом будет рассказано ниже. Что касается работы тега ноиндекс, то она безотказна. Абсолютно вся заключенная в этих тегах информация в индекс не попадает. Но некоторые вебмастера утверждают, что иногда все же текст внутри этих тегов индексируется ботами – да, действительно такое случается.

    А это все потому, что Yandex изначально индексирует полностью весь html-код страницы, даже находящийся внутри noindex, но затем происходит фильтрация. Поэтому вначале действительно проиндексирована вся страница, но через некоторое время html-код срабатывает и тест, заключенный в этот тег «вылетает» из индексации.

    Можно даже не соблюдать вложенность тега noindex – он все равно сработает (об этом рассказывается в справочной Яндекса). Не забывайте, используя, открывающий в конце исключаемого текста поставить закрывающий , а то весь текст, идущий после тега не проиндексируется.

    Nofollow

    Атрибут имеет задачу закрывать от поисковиков ссылки , расположенные в тексте. Он используется оптимизаторами для исключения передачи веса со ссылающегося ресурса на ссылаемый. Яндексу об этом атрибуте прекрасно известно.

    Необходимо знать, что nofollow вес на странице не сохраняет – если ссылка заключена в этот тег. Вес ресурса по ней не переходит, а наоборот «сгорает» или при присутствии на странице других не закрытых атрибутом ссылок, вес будет распределяться между ними. И если на странице сайта присутствует хотя бы одна внешняя активная ссылка, то вес страницы будет уходить.

    Основным отличием между nofollow и noindex является то, что нофоллоу – атрибут для тега , который запрещает передачу веса по ссылке, а ноиндекс – это тег, который закрывает от индексации нужный вам текст. Вот пример использования атрибута nofollow:

    Текст ссылки

    Естественно, в ссылках, которые ведут на внутренние странички блога атрибут nofollow ставить бессмысленно, хотя бывают исключения. В тех случаях, когда вес со страницы нужно передать по выбранным внутренним ссылкам, все остальные можно закрыть.

    Пример совместного использования nofollow и noindex

    Прекрасно себя чувствуют оба тега nofollow и noindex, когда они находятся в непосредственной близости. Вот пример их использования:

    Текст ссылки

    Оформление ссылки, таким образом, поможет вам удержать вес страницы и к тому же поисковый бот Яндекса анкор не увидит. В заключении нужно сказать, что не нужно закрывать тегом ноиндекс ссылки, таким образом, вы запрещаете индексацию только анкора, но не самой ссылки. Для нее будет достаточно одного атрибута нофоллоу.

    Качественная оптимизация сайта – это путь к достижению успеха в достижении высоких позиций в выдаче поисковой системы. Для качественной оптимизации очень важно скрыть от поисковых систем ненужные фрагменты текста, или скрыть от индексации определенные ссылки, или скрыть целые страницы.

    Для реализации запрета индексации определенных участков текста, используются:

    • тег Noindex
    • атрибут Nofollow

    Эти теги имеют большое влияние на перераспределение веса ссылок на странице.

    Зачем использовать тег Noindex ?

    Тег Noindex применяется веб-мастерами для запрета индексации Яндексом определенных участков HTML-кода. Тег Noindex скрывает от индексации только определенные участки текста страницы. К сожалению, этим тегом нельзя скрывать изображения и ссылки.

    Тег Noindex скрывает только анкор ссылки . Сам URL попадет в индекс поисковой машины. Тем не менее, этот тег неприемлем для многих HTML-редакторов.

    Например, встроенный редактор «движка» WordPress не воспринимает его, а визуальный редактор Вордпресс вовсе убирает этот тег. Но, можно прибавить валидности этому тегу, используя его в следующем виде:

    Используя тег такого вида в редакторе Вордпресс, можно не бояться за его удаление. Также необходимо различать обыкновенный тег noindex и мета-тег noindex , который ставится в начале страницы. Их задачи кардинально отличаются друг от друга.

    • Обыкновенный тег, который мы рассматриваем, запрещает индексацию только определенной части HTML-кода, между и . Пример: Яндекс не видит это предложение
    • Есть также другой вид тега noindex, который запрещает индексирование страницы или всего сайта через Robots.txt.

    Существует мнение о том, что скрытый от индексирования код страницы может попасть в индекс поисковой системы. Они правы. Изначально поисковая машина добавляют в индекс весь код страницы, а после этого проводит фильтрацию, отбрасывая код страницы скрытый от индекса. Поэтому некоторое время тег ноиндекс может не работать.

    Применять тег стоит в следующих случаях :

    • скрытие от Яндекс счетчиков посещаемости;
    • скрыть нецензурные выражения (лучше конечно вовсе не применять их);
    • скрыть от индексации неуникальную часть контента (цитаты, копипаст);
    • скрыть постоянно меняющийся контент (индексировать его не имеет смысла);
    • скрыть подписки на почту или RSS;
    • скрыть от индексации ненужную информацию в сайдбаре сайта;

    Применение Noindex не имеет смысла в следующих случаях :

    • скрывать ссылки от индексации;
    • cсылки из комментариев также нельзя скрыть этим тегом;
    • применять тег для скрытия рекламы на сайте также не имеет смысла;
    Зачем использовать тег Nofollow ?

    Атрибут nofollow служит для недопущения индексации ссылок поисковиками Google и Яндекс. Тег служит главным образом для недопущения манипуляций с распределением ссылок.

    Если определенная ссылка используется с атрибутом nofollow, то вес этой ссылки «растворяется», и не переходит другим ссылкам на страницах. В связи с этим нет необходимости скрывать от индексации одни ссылки для добавления веса другим ссылкам на странице.

    Атрибут nofollow чаще всего используется в следующих случаях :

    • применять атрибут стоит для уменьшения количества ссылок на страницах сайта;
    • скрыть от ПС ссылки на посторонние ресурсы, которые для вас не играют никакой роли;
    • желательно применять при добавлении ссылок на не тематические ресурсы;
    • не придавать вес популярным сайтам с высокими показателями ТИЦ и PR;
    • скрыть ссылки из комментариев (если ваш блог не dofollow);
    Совмесное использование Nofollow и Noindex

    Nofollow и Noindex можно использовать и в паре. Совместное использование этих элементов может практически полностью скрыть ссылку от «глаз» поисковых роботов.

    В случае применение атрибута и тега в паре:

    анкор

    • Google увидит только анкор;
    • Яндекс не видит ни анкор ни ссылку;

    Однако это не поменяет вес других ссылок на странице. В случае использование ссылок на посторонние и не тематические ресурсы достаточно будет тега Nofollow, поэтому использовать теги в паре не имеет смысла.

    Существует распространенная легенда о том, что Яндекс работает исключительно с тегом noindex, а поисковая система Google с атрибутом nofollow. Как Вы уже увидели – это не совсем так. Атрибут Nofollow виден и Яндексу и Google.

    Оптимизация сайта с помощью атрибута Nofollow и тега Noindex должна производиться правильно. Благодаря сегодняшнему материалу, мы узнали больше об этих тегах и их применению.

    Доброго времени суток, уважаемые читатели. Часто сталкиваюсь с тем, что у многих начинающих вебмастеров и блоггеров полная каша в голове по поводу использования noindex и nofollow. Давайте разберемся что это такое, с чем едят и расставим все точки над i.

    Стоит начать с того, чтобы в дальнейшем у вас никогда не было путаницы в голове, что и noindex и nofollow используют в двух относительно разных значениях в web-документе.

    Первое – это внутри мета-тега ROBOTS (не путайте с файлом robots.txt) в значении атрибута content. Данный мета-тег имеет отношение ко всему документу в целом. Второе, используется только nofollow – внутри тега и имеет отношение к конкретной ссылке. Про тег noindex немного другая история, и о ней мы также сегодня поговорим. Стоит также отметить, что я буду рассматривать использование nofollow и noindex только в двух поисковых системах – Яндекс и Google.

    NOINDEX и NOFOLLOW в мета-теге ROBOTS

    Мета-тег robots отвечает за всю страницу целиком. Через данный мета-тег можно запрещать или разрешать индексировать контент страницы.

    Noindex отвечает за запрет индексации текста на странице.

    Nofollow отвечает за запрет индексации ссылок на странице.

    Используются данные значения следующим образом:

    что означает – данную страницу нельзя индексировать вообще.

    Могут быть и такие значения:

    можно индексировать контент, но игнорировать ссылки на странице, т.е. не индексировать их.

    Более подробно про мета-тег robots вы можете прочитать в моей статье .

    NOFOLLOW в ссылках

    Nofollow используется как значение атрибута rel в теге . И отвечает за индексацию каждой конкретной ссылки на странице.

    Атрибут rel показывает отношение данного документа к документу, на который ссылается.

    В данном случае, указывая атрибуту rel значение nofollow, мы просим поисковую систему не переходить по внешней ссылке, а также подчеркиваем то, что мы не отвечаем за содержание, на которое ссылаемся.

    По ссылкам, оформленным с данным значением, не передается авторитет нашей страницы, другими словами не передается тИЦ и Page Rank. Однако стоит также учитывать и то, что в случае с PR вес все же уходит, но не на сайт, на который мы ссылаемся, а в никуда в прямом смысле этого слова. По поводу тИЦ точной информации о том, уходит вес или остается на сайте - нет.

    Остановимся подробнее на распределении и передаче веса в Google.

    Итак, абсолютно не важно, сколько ссылок у вас имеют атрибут , а сколько без него. Если на странице стоит 10 ссылок, то каждая ссылка получит часть авторитета вашей страницы, и каждая из них передаст этот вес, но если в одном случае вес передастся на конкретный сайт, то в другом случае – вес просто уйдет в никуда.

    Давайте представим немного, как видит всемирную паутину поисковая система. Все сайты связаны между собой ссылками, абсолютно все. Первый ссылается на второй, второй на третий … тысячный на тысяча первый и миллион какой-то в итоге обязательно будет ссылаться на первый.

    Таким образом цепочка замыкается, все сайты находятся в цикле, и вес, который передает первый сайт всегда возвращается к нему через сотни и тысячи других сайтов. Также не забываем, и я уже писала об этом в , что этот вес передается не единожды, а постоянно, при этом с течением времени вес становится только больше, все сильнее увеличивая свой авторитет. Именно на этом принципе строится перелинковка сайта.

    Теперь представим, что первый сайт закрыл свои ссылки атрибутом . Вес не перейдет на второй сайт, а утечет в никуда, и второй сайт не получит ту часть веса, которую должен был, не сможет передать его дальше по цепочке, и в итоге, пройдя весь цикл, Х-какой-то сайт, который должен был передать вес на первый сайт, передаст его в значительно меньшем количестве, чем мог бы. Итак, каждый раз не получая ту часть веса, которую вы самостоятельно пускаете в никуда, закрывая свои ссылки атрибутом , сайт не может передать вам ее, из чего следует, что закрывая свои ссылки, вы сами лишаете себя увеличения веса, и такого показателя, как PR.

    Чтобы было проще это понять, представим, что каждая ссылка передает вес, равным единице.

    Таким образом, если первый сайт не закрыл ссылку атрибутом , то в конце цикла получит больший вес от входящих ссылок, чем в случае, если исходящие ссылки будут закрыты.

    Закрывать ссылку невыгодно, если вы действительно, по настоящему рекомендуете своим читателям статью, на которую ссылаетесь, свою страничку в социальной сети, на свою ленту RSS. Глупо закрывать ссылки на свои же страницы в социальных сетях, когда рекомендуете своим читателям подписаться на обновления блога через них. Ведь это же ваши собственные страницы, ваша собственная RSS лента, в которой транслируется ваше же содержание. Разве вы сами не отвечаете за него?

    Но есть ситуации, когда действительно необходимо закрывать ссылки значением nofollow. Обратимся к источникам, Яндекс и Google, что они говорят по этому поводу?

    Дополнительно к этому Google рекомендует обозначать продажные ссылки атрибутом . Также Google пишет, что с помощью nofollow мы можем указать роботу на закрытые разделы нашего сайта, но уточняет, что есть и другие способы указывать на это.

    Также мне хотелось бы уделить внимание ещё одному моменту. Некоторые ярые борцы за закрытые ссылки ставят не только в самих ссылках, т.е. в теге , но и везде, на что только хватает фантазии. И в теге , и , и в теге .

    Давайте не будем выдумывать свои собственные стандарты, а обратимся к существующим, которые разрабатывает международная организация W3C.

    Значение можно использовать только в теге , и в других тегах его использовать нельзя!

    Итак, мы выяснили, когда стоит пользоваться атрибутом ссылки , а когда это не целесообразно. Также мы больше не будем вставлять его никуда, кроме одного единственного тега, обозначающего ссылку. Теперь уделим внимание тегу noindex.

    NOINDEX – рудимент от Яндекса

    Когда-то Яндекс не понимал значение nofollow, и поэтому придумал свой собственные тег

    что-то внутри

    для того, чтобы можно было закрывать неугодные ссылки с его помощью. Все, что находилось внутри данного тега игнорировалось роботом Яндекса. Но с тех пор утекло немало воды, Яндекс повзрослел и начал понимать атрибут . Случилось это ещё весной 2010 года. Именно тогда тег noindex потерял свое значение в качестве инструмента для закрытия ссылок. Но при этом осталось другое значение – скрывать текстовый контент. Выдержка из раздела Помощь Яндекса :

    Им рекомендуется скрывать служебные участки текста. О каких служебных участках идет речь – не совсем ясно, но совершенно очевидно, что к ссылкам этот тег теперь не имеет никакого отношения. Т.е. получается, если мы поместим ссылку в данный тег:

    Можно смело отказаться от использования данного тега, тем более, учитывая ещё и его невалидность. Ведь по сути такого тега вообще не существует. Как мы знаем, стандарты HTML разрабатывает международная организация W3C, и в спецификации к языку HTML нет такого тега, это полностью выдумка Яндекса.

    Остался ещё один вопрос, на который мне хотелось бы обратить ваше внимание. Часто, когда я пытаюсь объяснить то, о чем написала в данной статье, мне возражают:

    "Я делаю анализ сайта таким-то инструментом, и он показывает мне, что у меня ссылки не закрыты…

    Вы можете верить всем этим инструментам, это ваше полное право, но не лучше ли верить официальной документации поисковиков, и не лучше ли думать собственной головой?

    Удачи в оптимизации сайтов.

    Описание

    Атрибут rel определяет отношения между текущим документом и документом, на который ведет ссылка, заданная атрибутом href . Несмотря на то, что браузеры в большинстве своем не поддерживают атрибут rel , на сайтах часто можно встретить код , предназначенный для поисковых систем Google и Яндекс. Ссылки, помеченные таким образом, не передают PageRank и ТИЦ.

    Синтаксис
    ... Обязательный атрибут Значения

    Некоторые возможные значения перечислены ниже.

    Answer Ответ на вопрос. chapter Раздел или глава текущего документа. co-worker Ссылка на страницу коллеги по работе. colleague Ссылка на страницу коллеги (не по работе). contact Ссылка на страницу с контактной информацией. details Ссылка на страницу с подробностями. edit Редактируемая версия текущего документа. friend Ссылка на страницу друга. question Вопрос.

    В HTML5 поддерживается следующие значения.

    Archives Ссылка на архив сайта. author Ссылка на страницу об авторе на том же домене. bookmark Постоянная ссылка на раздел или запись. first Ссылка на первую страницу. help Ссылка на документ со справкой. index Ссылка на содержание. last Ссылка на последнюю страницу. license Ссылка на страницу с лицензионным соглашением или авторскими правами. me Ссылка на страницу автора на другом домене. next Ссылка на следующую страницу или раздел. nofollow Не передавать по ссылке ТИЦ и PR. noreferrer Не передавать по ссылке HTTP-заголовки. prefetch Указывает, что надо заранее кэшировать указанный ресурс. prev Ссылка на предыдущую страницу или раздел. search Ссылка на поиск. sidebar Добавить ссылку в избранное браузера. tag Указывает, что метка (тег) имеет отношение к текущему документу. up Ссылка на родительскую страницу.

    Значение по умолчанию

    HTML 4.01 IE Cr Op Sa Fx

    Тег А, атрибут rel

    Наш ответ Яндексу

    HTML5 IE Cr Op Sa Fx

    Добавить в избранное

    Добавить в избранное

    Браузеры

    Firefox поддерживает значение prefetch и sidebar . Opera поддерживает значение sidebar .

    Вверх