По умолчанию noindex. Использование мета-тегов и других HTML-элементов
Качественная оптимизация сайта – это путь к достижению успеха в достижении высоких позиций в выдаче поисковой системы. Для качественной оптимизации очень важно скрыть от поисковых систем ненужные фрагменты текста, или скрыть от индексации определенные ссылки, или скрыть целые страницы.
Для реализации запрета индексации определенных участков текста, используются:
- тег Noindex
- атрибут Nofollow
Эти теги имеют большое влияние на перераспределение веса ссылок на странице.
Зачем использовать тег Noindex ?
Тег Noindex применяется веб-мастерами для запрета индексации Яндексом определенных участков HTML-кода. Тег Noindex скрывает от индексации только определенные участки текста страницы. К сожалению, этим тегом нельзя скрывать изображения и ссылки.
Тег Noindex скрывает только анкор ссылки . Сам URL попадет в индекс поисковой машины. Тем не менее, этот тег неприемлем для многих HTML-редакторов.
Например, встроенный редактор «движка» WordPress не воспринимает его, а визуальный редактор Вордпресс вовсе убирает этот тег. Но, можно прибавить валидности этому тегу, используя его в следующем виде:
Используя тег такого вида в редакторе Вордпресс, можно не бояться за его удаление. Также необходимо различать обыкновенный тег noindex и мета-тег noindex , который ставится в начале страницы. Их задачи кардинально отличаются друг от друга.
- Обыкновенный тег, который мы рассматриваем, запрещает индексацию только определенной части HTML-кода, между . Пример: Яндекс не видит это предложение
- Есть также другой вид тега noindex, который запрещает индексирование страницы или всего сайта через Robots.txt.
Существует мнение о том, что скрытый от индексирования код страницы может попасть в индекс поисковой системы. Они правы. Изначально поисковая машина добавляют в индекс весь код страницы, а после этого проводит фильтрацию, отбрасывая код страницы скрытый от индекса. Поэтому некоторое время тег ноиндекс может не работать.
Применять тег стоит в следующих случаях :
- скрытие от Яндекс счетчиков посещаемости;
- скрыть нецензурные выражения (лучше конечно вовсе не применять их);
- скрыть от индексации неуникальную часть контента (цитаты, копипаст);
- скрыть постоянно меняющийся контент (индексировать его не имеет смысла);
- скрыть подписки на почту или RSS;
- скрыть от индексации ненужную информацию в сайдбаре сайта;
Применение Noindex не имеет смысла в следующих случаях :
- скрывать ссылки от индексации;
- cсылки из комментариев также нельзя скрыть этим тегом;
- применять тег для скрытия рекламы на сайте также не имеет смысла;
Зачем использовать тег Nofollow ?
Атрибут nofollow служит для недопущения индексации ссылок поисковиками Google и Яндекс. Тег служит главным образом для недопущения манипуляций с распределением ссылок.
Если определенная ссылка используется с атрибутом nofollow, то вес этой ссылки «растворяется», и не переходит другим ссылкам на страницах. В связи с этим нет необходимости скрывать от индексации одни ссылки для добавления веса другим ссылкам на странице.
Атрибут nofollow чаще всего используется в следующих случаях :
- применять атрибут стоит для уменьшения количества ссылок на страницах сайта;
- скрыть от ПС ссылки на посторонние ресурсы, которые для вас не играют никакой роли;
- желательно применять при добавлении ссылок на не тематические ресурсы;
- не придавать вес популярным сайтам с высокими показателями ТИЦ и PR;
- скрыть ссылки из комментариев (если ваш блог не dofollow);
Совмесное использование Nofollow и Noindex
Nofollow и Noindex можно использовать и в паре. Совместное использование этих элементов может практически полностью скрыть ссылку от «глаз» поисковых роботов.
В случае применение атрибута и тега в паре:
- Google увидит только анкор;
- Яндекс не видит ни анкор ни ссылку;
Однако это не поменяет вес других ссылок на странице. В случае использование ссылок на посторонние и не тематические ресурсы достаточно будет тега Nofollow, поэтому использовать теги в паре не имеет смысла.
Существует распространенная легенда о том, что Яндекс работает исключительно с тегом noindex, а поисковая система Google с атрибутом nofollow. Как Вы уже увидели – это не совсем так. Атрибут Nofollow виден и Яндексу и Google.
Оптимизация сайта с помощью атрибута Nofollow и тега Noindex должна производиться правильно. Благодаря сегодняшнему материалу, мы узнали больше об этих тегах и их применению.
Мета-теги позволяют указывать метаданные о странице сайта. Ряд мета-тегов также используется роботами поисковых систем.
Робот Яндекса учитывает содержимое следующих мета-тегов:
- - может учитываться при определении соответствия страницы поисковым запросам;
- . Подробнее см. в разделе Мета-тег robots и HTTP-заголовок X-Robots-Tag .
- - робот может учитывать этот тег при определении типа документа и его кодировки;
- содержание данного тега может использоваться в сниппетах (описаниях сайтов на странице результатов поиска);
Примечание. Зачастую мета-тег Description создается автоматически, повторяет содержимое элемента title и не ориентирован на удобство для пользователей поисковой системы. Наличие мета-тегов с некачественным содержанием может стать причиной удаления страницы из результатов поиска .
- используется для адаптации сайта к показу на мобильных устройствах . Позволяет контролировать масштабирование окна просмотра в браузере. Значение width=device-width адаптирует ширину окна просмотра к экрану устройства. Значение initial-scale=1 позволяет обеспечить соотношение 1:1 между пикселями CSS и независимыми пикселями устройства.
Если мета-тег отсутствует, мобильные браузеры по умолчанию показывают страницу для экрана компьютера. Так как ширина экрана мобильного устройства значительно меньше экрана компьютера, браузеры пытаются оптимизировать содержание - увеличивают шрифт, масштабируют содержание по размеру экрана или показывают только часть контента, которая помещается на экране.
- перенаправление (редирект) пользователя на страницу с адресом URL, после N секунд нахождения на данной странице. При небольших значениях N считается временным перенаправлением, аналогичным серверным редиректам с HTTP-кодом 302/303/307.
Элемент noindex
Используйте элемент noindex для запрета индексирования служебных участков текста. Чтобы закрыть от индексирования конфиденциальную информацию, используйте:
- директиву Disallow в файле robots.txt ;
- директиву noindex в мета-теге robots ;
- авторизацию на сайте.
Элемент noindex не чувствителен к вложенности - может находиться в любом месте HTML-кода страницы.
При необходимости сделать код сайта валидным возможно использование тега в следующем формате:
текст, индексирование которого нужно запретить
Атрибут rel со значением nofollow элемента a
Атрибут работает аналогично мета-тегу со значением nofollow , но распространяется только на ссылку, для которой указан.
Атрибут rel со значением canonical элемента link
Если на сайте присутствуют группы схожих по контенту страниц, вы можете указать для каждой группы предпочитаемый (канонический) адрес, который будет участвовать в поиске. Например, страница доступна по двум адресам:
Www.example.com/pages?id=2\nwww.example.com/blog
Если предпочитаемый адрес - /blog , это нужно отразить в коде страницы /pages?id=2 :
Также если на странице атрибут rel=\"canonical\" расположен с указанием непосредственного адреса этой страницы, робот посчитает ее канонической. Данная страница будет индексироваться и появится в поисковой выдаче Яндекса.
Например, робот может не использовать указанный вами адрес, если:
Документ по каноническому адресу недоступен для индексирования.
В качестве канонического адреса указывается URL в другом домене или поддомене. Сайты, доступные по адресам с префиксом www и без него, а также по протоколам HTTP и HTTPS, рассматриваются как разные ресурсы, если они не объединены в группу зеркал .
Вы указали несколько канонических адресов.
Также не рекомендуем создавать цепочки канонических адресов. Например: для адреса example.com/1 каноническим адресом является example.com/2 , в то время как для адреса example.com/2 указан канонический адрес example.com/3 .
В апреле, поисковик Yandex, обрадовал рунетовских веб-мастеров, включением поддержки атрибута rel=»nofollow» в ссылках. Какую пользу это нам — блоггерам принесет? Как правильно прописать атрибут rel=»nofollow» в ссылках и что теперь будет с ?
Давайте попробуем разобраться в этих новинках Яндекса.
Небольшая предыстория атрибута rel=nofollow
Что такое rel=nofollow?
Rel=» « — атрибут в ссылке , указывающий отношение ссылки к целевой странице. Также, есть еще атрибут Rev=» « , указывающий отношение целевой страницы к ссылке, например (ссылка с rev=»sponsor» указывает, что это спонсорская ссылка). Но об этом в следующей статье.
Nofollow — статус, говорящий о том,что вы не одобряете данную ссылку.
Исходя из вышесказанного:
Rel=nofollow — определяет отношение вашей ссылки к целевой странице как не одобряемое. Применительно к поисковикам, данный атрибут указывает индексирующим роботам, что по данной ссылке не следует переходить на целевую страницу.
Rel=nofollow был введен и стандартизирован в 2005 году, в ответ на многочисленный ссылочный спам, присутствующий в блогах. Инициатором введения была поисковая система Google, .
Google , встречая ссылку с данным атрибутом, не следует по данной ссылке и не передает вес PR целевым страницам. Также, данные ссылки не учитывались в расчетах распределения ссылочного веса по ссылкам страницы. Но, так было до 2010 года. На данный момент, Google, также не передает ссылочный вес и не следует по ссылкам с rel=»nofollow», но вот ссылочный вес, внутри страницы, стал распределятся и на эти ссылки но впустую. То есть, если у вашей страницы PR-10 и 10 ссылок на странице, где 5 из них закрыты, то каждая открытая ссылка передавала по 2PR на целевую страницу. Теперь каждая открытая ссылка будет передавать 1PR по открытым ссылкам и по 1PR в пустоту по закрытым. Но эта статья не о Google, вернемся к Яндексу.
Yandex, до апреля месяца 2010г., не учитывал данный статус. В рекомендациях Яндекса находим нашумевший тег
В чем разница rel=nofollow и
Так в чем же проблема?
Зачем Яндексу понадобилось вводить поддержку rel=»nofollow»?
Все дело в том, что тег . Данный тег нигде в мире, кроме самого Яндекс, не поддерживается и не стандартизирован. При проверке ресурса на ошибки в коде и поддержке web-стандартов, веб-мастера всегда получали «не валидный» код. То есть, ваш ресурс содержит ошибки. Но, спешу вас успокоить, это не критическая ошибка и практически ни на что не влияет. Для тех кому важен валидный код, вот структура, рекомендованная самим Yandex для валидности вашего кода:
Еще одна проблема тега
Атрибут со статусом rel=»nofollow»
стандартизирован и используется во всем мире для указания поисковикам, что ссылка не одобрена автором и по ней не нужно следовать.
Например, если закрыть служебную страницу от индексации в robots.txt, а ссылку оставить открытой, робот проследует на данную страницу, но не проиндексирует ее. Зачем тогда тратить ресурсы робота на переходы по ненужным страницам? Еще есть один нюанс, если на вашу служебную страницу ведут открытые ссылки с других внешних источников, то ваша, как бы закрытая страница, попадет в поиск, даже если она закрыта в robots.txt. Об этом также расскажу в следующих статьях.
Исходя из всего этого, по многочисленным просьбам и жалобам веб-мастеров, Яндекс ввел поддержку стандартизированного W3C атрибута со статусом rel=»nofollow». Атрибут закрывает ссылки от переходов роботом и не передает вес. Теперь многое стало проще. Но есть один нюанс. Анкоры ссылок будут проиндексированы как текст.
Зачем нужен
Тег очень важен, если вы хотите, чтобы часть текста, со всеми анкорами ссылок и т.д., не индексировалась и не попала в поисковую базу Yandex.
Например, у вас на странице может быть служебная информация, или блок текста с сайта, который используется как негативный пример. Вы не хотите, чтобы поисковик связал ваш сайт с данным текстом или индексировал служебную информацию и сохранил у себя в базе. Для этого данный блок обрамляется тегом .
К сожалению, такого инструмента для Google не существует. Вполне возможно, что Google или консорциум W3C в будущем обратят внимание на данный тег или придумают свой, и веб-мастера получат в свой инструментарий еще один полезный инструмент.
Как правильно прописать rel=nofollow и
- Для закрытия ссылок от индексации, с помощью rel=»nofollow»
, используется простая схема:
Ссылка на сайт
перехода по ссылке не будет. - Для закрытия блока текста тегом , со всем содержимым, в том числе и с анкорами ссылок, используется схема:
Блок вашего закрываемого текста
данный текстовый блок не будет проиндексирован в Яндекс, со всеми текстами ссылок. - Для закрытия блока текста тегом и ссылок в блоке, используется схема:
Блок вашего закрываемого текста Текст анкор ссылки Блок вашего закрываемого текста
данный блок не будет проиндексирован в Яндекс, со всеми ссылками содержащимся в данном блоке.
Что изменилось с вводом поддержки rel=nofollow?
- Для тех, кто ведет ресурсы для людей и не использует спам-продвижения, почти ничего не изменится. Возможно некоторое уменьшение числа внешних ссылок, закрытых с rel=»nofollow».
- Для тех, кто использовал в продвижении ссылочный спам (спам в комментариях, спам в форумах, соц. сетях, Википедии и т.д), и у кого основная ссылочная масса, дающая ТИЦ, состояла из таких ссылок, будет существенное снижение ТИЦ и как правило, проседание в поисковой выдаче Yandex.
Кратко, о новинках апреля 2010 года в Яндекс:
- У страницы поисковой выдачи Яндекс теперь фиксированная ширина.
- Появились в выдаче навигационные цепочки, у некоторых сниппетов и даты публикации.
- Появился колдунщик видео.
- В панели веб-мастера появилась возможность просмотра статистики по собственным ключевым словам.
P.S.
Теперь осталось дождаться включения поддержки Яндексом канонического атрибута rel=»canonical»,
о котором я писал в , и многие блогеры вздохнут с облегчением.
Хорошая новость, в конце мая 2011г. Яндекс стал учитывать атрибут rel=»canonical»
. Принесет это облегчение или нет, покажет время.
Секреты оптимизации сайтов заключаются не только в их продвижении по ключевым запросам, заботе о юзабилити и увеличении трафика, но и в правильном использовании html-кода. Правильное применение тегов и их атрибутов часто помогает избежать многодневной работы. Есть популярные и эффективные приемы. Наверное, в SEO-оптимизации нельзя отделить друг от друга атрибуты rel nofollow и тег noindex. Поэтому в этой статье пойдет речь и о том и о другом, а также о том, для чего они нужны, стоит ли их ставить рядом и в каких случаях ими пользоваться, а когда этого делать не стоит.
Индексирование страниц и их вес
Один из важнейших параметров попадания сайта в ТОП 10 поисковых систем - вес его страниц. Именно они попадают в первую выдачу Яндекса и Google, а за ними и интернет-порталы. Вес каждой из них повышается за счет ссылок - как внешних, так и внутренних. Понимать, как происходит процесс распределения этого параметра между страницами своего сайта и интернет-проектами, ссылки которых размещены на собственном ресурсе, важно каждому веб-мастеру.
Куда уходит вес
Рассмотрим элементарный пример. Допустим, что в главном тексте расположены две ссылки, ведущие на другие публикации. Изначально присвоим каждой странице вес равный 1. При индексации поисковый робот учтет обе ссылки. При этом вес главной страницы уменьшится на коэффициент равный 0,85. Несложно подсчитать, сколько получат публикации, на которые ведут ссылки: 0,85/2=0,425.
Алгоритм этот не является точным и официальным расчетом поисковых систем. Он изложен для того, чтобы читателю в общих чертах было понятно распределение такого параметра, как вес страницы. Когда его значение ясно, легче воспринимать информацию о том,
Скрыть ссылки от поисковых роботов
Конечно, любой сайт создается с целью получить какую-либо прибыль с него. И вес каждой страницы ценится веб-мастером. Но не размещать в своих публикациях невозможно. На это есть причины, и вот несколько из них:
Покупка и продажа ссылок приносит прибыль;
Повышается посещаемость интернет-проекта.
Существует мнение, что атрибут тега a - rel nofollow поможет скрыть анкоры от поисковых роботов и при этом вес страницы сохранится. Но это утверждение возможно только при правильном написании кода. Точное написание этого атрибута выглядит так:
>анкор.
Правильная перелинковка только придает сайту вес и повышает его ранжирование. Излишне говорить, что для внутренних ссылок нет нужды использовать a href rel nofollow.
Пример использования
Объяснение в общих чертах не всегда открывает полную картину важности применения тех или иных тегов и их атрибутов. Скрыть ссылку, не отдать вес страницы своего сайта другому. Что это? Просто жадность? Нет, это далеко не так. К примеру, на многих сайтах есть кнопки социальных сетей. Согласитесь, что их траст и так велик. Коды социальных кнопок с сохранением веса собственных страниц прописываются с использованием атрибутов target blank, rel nofollow. Первый из них после клика приведет посетителя на сторонние интернет-ресурсы, открыв еще одну вкладку браузера. Второй - не позволит уменьшить вес страницы. Например, для кнопки социальной сети Twitter это будет выглядеть так:
a rel=”nofollow”target=”_blank”href=”URL/home/.
Стоит оговориться о валидности кода - соблюдении всех технических требований html-разметки. Тег rel external nofollow не только не хуже заменяет атрибут target_blank, но и лучше воспринимается роботами поисковых систем.
A rel href nofollow, или Когда он еще нужен
Скрытия от поисковиков ссылок на «плохие» или нетематические сайты;
Того, чтобы спрятать большое количество адресов на сторонние ресурсы;
Скрытия ссылок в случае, если веб-мастер ими торгует;
Непередачи веса мегапопулярным порталам, таким как Яндекс или Google;
Скрытия ссылок в комментариях.
Nofollow спасает сайты, а особенно блоги от спама. Непроверенные ссылки, закрытые таким атрибутом, будут все реже и реже появляться в комментариях.
Noindex, и почему о нем стоит говорить
Запрет индексирования можно задать не только на ссылке внешние и внутренние, но и на отдельные элементы текстов, а также страницы целиком. Для этого веб-мастера используют тег noindex. Скрывает он только тексты. К картинкам и фотографиям не применим. Ссылки же, которые успешно прячет rel nofollow, noindex утаить от поисковых систем не может. Анкоры робот не увидит, а вот адреса проиндексирует. Noindex обычно используют для скрытия части контента:
С нецензурными выражениями;
С неуникальным текстом;
Тег, безусловно, использовать нужно. Но работает он не на каждом движке. Дело в том, что noindex не валиден, то есть не соответствует стандартам. Именно поэтому одна из самых популярных платформ для ведения блогов WordPress «выкидывает» тег из своего кода. Секрет валидности заключается в применении нескольких знаков. . Написав код в таком виде, можно быть уверенным, что страницы блога на WordPress Яндекс не проиндексирует.
Совместное использование
Стоит ли прописывать и тег, и атрибут в коде страницы? Ничего не мешает использовать noindex и a rel nofollow в паре. Тег не мешает атрибуту, и наоборот. Ставят их рядом потому, что поисковые системы по-разному видят код сайта. Например, при использовании и тег, и атрибута веб-мастер может быть уверен, что анкор робот Яндекса не распознает, как и не увидит и саму ссылку. Google же увидит текст, но вес не передаст сторонним страницам других сайтов.
Специально для новичков
Оптимизация сайтов - новая на рынке труда и интересная работа. Отсутствие системно спланированных информационных ресурсов для новичков значительно усложняет их деятельность. И естественно, молодые веб-мастера совершают ошибки. Кто-то наполняет контент безумным количеством ссылок, кто-то оставляет страницы вообще без одной. Та же картина в случае с расстановкой тега noindex и атрибута rel nofollow.
Стремление вывести сайт в ТОП поисковых систем является причиной совершения критической ошибки. Дело в том, что новички часто закрывают внешние ссылки и тегом, и атрибутом. Это в какой-то степени действительно сохраняет вес каждой страницы сайта. Но правда и в том, что те же внешние ссылки повышают доверие со стороны поисковых систем. Компенсировать потерю веса можно продвижением по низко-, и среднечастотным запросам.
Любому оптимизатору стоит помнить, что любая информация будет восприниматься читателями с большим доверием в случае возможности перейти по ссылке к ее источнику. Наверняка сами веб-мастера вряд ли возьмут на вооружение книгу или брошюру, в которой отсутствует список используемой литературы.
Все больше пользователей Интернета ориентируется на авторитетные источники. И если молодой сайт не будет ссылаться на их мнение, то ему будет намного сложнее удержать читателей, привлечь подписчиков. Само собой это негативно повлияет на оптимизацию ресурса по Так стоит ли слепо использовать атрибуты rel nofollow?
Хороший веб-мастер заботится о своем читателе. Помнит, что одна из основ Интернета - это ссылки на авторитетные ресурсы, предоставляющие достоверную информацию. Сайты, сделанные для людей, поисковики «любят». И вес страниц не единственный параметр, по которому страницы с контентом попадают в ТОП. По 800 параметрам Яндекс оценивает интернет-проекты.
И в конце концов, вес страниц имеет значение только для публикаций, получивших его от ссылок со сторонних сайтов. Как показывает опыт, доноры, оставив этот параметр ранжирования себе, не поднимаются по нему выше в «глазах» поисковых систем.