Rel Nofollow і Noindex - як закрити від індексації Яндексом і Гуглом зовнішні посилання на сайті

1. Який вплив справляють rel nofollow і тег noindex
2. Як закрити від індексації зовнішні посилання
3. Як Яндекс враховує rel nofollow і noindex

Привіт, шановні читачі блогу KtoNaNovenkogo.ru. Сьогодні я хочу торкнутися проблеми розуміння того, чи можна зараз використовувати rel = "nofollow" і noindex для того, щоб закрити посилання від індексації пошуковими системами Яндекс і Google, бо за останні півроку або рік відбулася кардинальна зміна алгоритму роботи nofollow.

Проблема тут полягає в тому, що Google змінив принцип розрахунку статичної ваги при його використанні rel nofollow і зміна це давно і гаряче обговорюється на різних тематичних форумах по просуванню і оптимізації сайтів.

Який вплив справляють rel nofollow і тег noindex

Та й Яндекс теж не відстав від свого найбільшого конкурента на ринку пошуку рунета і змінив, починаючи з 2010 року, своє ставлення до nofollow (він став його враховувати).

Раніше дзеркало рунета його ігнорував, але тепер, як видно з скріншоту знятого на цій сторінці хелпа, даний атрибут працює і враховується.

Тег ж noindex, який Яндекс ввів в обіг одноосібно і який до певного часу був єдиною альтернативою нофоллоу, зараз ніяк не впливає на облік закритою їм посилання.

Але за допомогою нього як і раніше можна закривати від індексації окремі фрагменти вебсторінки. Цей тег є парним і враховуватися пошуки не буде все, що потрапило між його відкриває і закриває елементом.

Оскільки ноіндекс був чисто нашим містечковим винаходом, то, природно, що він не був включений до реєстру дозволених тегів поточної версії мови Html 4.01 і валідатор на нього як і раніше лається.

Для уникнення цього можна використовувати його в якості Html коментаря , Як це було показано на скріншоті вище. В цьому випадку валідатор W3c , Природно, лаятися не буде, бо в коментарях можна писати все, що завгодно.

<! - noindex -> текст, індексування якого потрібно заборонити <! - / noindex ->

Яндекс пише на своїй сторінці хелпа, що noindex і nofollow слід інтерпретувати точно так же, як і аналогічні значення, які використовуються в мета тезі robots .

Тобто нофоллоу забороняє перехід роботу пошуку за цим посиланням, а ноіндекс забороняє додавати укладений в ньому фрагмент тексту в індекс.

Google так взагалі ніколи не брав до уваги noindex і, природно, його з успіхом ігнорує, так само як і будь-який інший пошуковик крім Яндекса. Змінилося ставлення до підрахунку статичного ваги на сторінках, де знаходяться гіперпосилання з доданим до них атрибутом rel = "nofollow" . Раніше їх можна було взагалі не враховувати, однак зараз все стало трохи складніше і сумніше.

Але розповісти про все в двох словах - це не наш метод. Тому я зараз трохи підпущу «води», як висловлюються деякі панове в коментарях, і спробую на пальцях і абстрактних прикладах показати, що склалося. Так, відразу обмовлюся, що моя думка ні в якій мірі не є абсолютною істиною, бо воно лише висловлює мою точку зору на дану проблему. Заздалегідь спасибі всім коментаторам, бо в суперечці народжується істина.

Отже, давайте спочатку повернемося трохи в минуле і подивимося, як можна було за допомогою тегів nofollow і noindex закрити від індексації гіперпосилання для пошукових систем (найчастіше все ж намагаються закрити від індексації зовнішні беклінки, бо вони сприяють витіканню статичної ваги, але про це поговоримо трохи пізніше).

Так ось, тексти посилань, які називають ще анкорами, дозволяють Яндексу і Гуглу проводити так зване ранжирування посилань, істотно впливає на стан ресурсу в пошуковій видачі. Саме з цієї причини для просування сайту з якого-небудь запиту ( статистика пошукових запитів вам на допомогу) оптимізатори намагаються закупити якомога більше беклінків з текстами (анкорами), що містять ключові слова з того запиту, по якому просувається дана сторінка.

Свого часу ряд ентузіастів зробили так, що за запитом «жалюгідний невдаха» відкривався ресурс тодішнього президента Америки Буша молодшого. Що примітно, на самому ресурсі взагалі не зустрічалися дані ключові слова, але зате на нього була проставлена ​​гігантська посилальна маса з цим текстом (анкором), в результаті чого вийшов такий казус.

Зараз вже такий фокус не пройде, бо ранжирування посилань не має такого колосального впливу на ранжування і потрібно, щоб і на самому порталі Буша зустрічалася ця фраза, що малоймовірно.

Але на цьому роль посилань в пошуковому просуванні не закінчується, бо алгоритми пошуку в обов'язковому порядку для кожної сторінки кожного окремо взятого ресурсу розраховують так званий статичний вага. Можливо, що різні системи розраховують його трохи по різному, але суть залишається зміненою - статвес передається сторінці тільки за гіперпосиланням і при цьому не враховується її анкор.

Правда, будь-яка сторінка (документ, як їх називають пошуковики) відразу після своєї появи (індексації) має початковий мінімальний статичну вагу ( що таке pr в Гуглі ), Який може бути необмежено збільшений за рахунок входять зовнішніх і внутрішніх посилань на цю сторінку. Тут ключовим моментом є те, що він передається не тільки зовнішніми, а й внутрішніми посиланнями.

Причому документ, посилаючись на інші зовнішні або внутрішні сторінки, зовсім не втрачає свій статичний вага (pr для Google або віц для Яндекса), який цілком і повністю залежить тільки від кількості і вагомості входять на неї гіперпосилань. Під останнім я маю на увазі власний статвес сторінок донорів (донори - ті, звідки проставлені беклінков на ваш документ, який в цьому випадку виступає акцептором).

Як закрити від індексації зовнішні посилання

Пам'ятайте, в школі колись були популярні задачки про басейн з декількома вхідними та вихідними трубами? Там ще потрібно було розрахувати чи час наповнення басейну, то чи рівень води в ньому. Але не суть важливо. Просто я хочу взяти в якості абстрактного прикладу для більшої наочності саме такий басейн, та не простий, а з низкою припущень.

Кожен документ на сайті можна буде представити як окремий басейн, в який буде підводитися вода по ряду труб різного діаметру (наші входять внутрішні і зовнішні гіперпосилання з документів з різним статичним вагою), а так само буде ряд труб, по яких вода побіжить на інші документи вашого ж або ж будь-якого іншого ресурсу (вихідні внутрішні і зовнішні лінки).

Рівень же води в басейні буде еквівалентний статичному вазі, набраному даним документом (веб сторінці вашого ресурсу). Допущення ж полягатиме в тому, що вода, витікаючи по трубах вихідних посилань, не погіршить рівень води в басейні (статичну вагу документа).

Тепер дивіться уважно. Допусти, що у нас з одного документа проставлено 4 внутрішніх посилання і одна зовнішня (в аналогії з басейном це буде еквівалентно п'яти походить трубах однакового перетину). В результаті максимальний статвес, який може передати цей документ (вебсторінка), буде поділений рівно на 5 частин і лише одна п'ята цієї ваги передасться на кожну з 4 внутрішніх документів, а одна п'ята піде по зовнішньої.

А тепер уявіть, що ви маєте можливість попросити пошукові системи Яндекс і Google не індексувати цю саму одну зовнішню посилання (закрити її або в аналогії з басейном - перекрити вентиль на трубі, що веде нема на ваш проект).

Тоді максимальна вага документа, який він може передати, потрібно буде ділити вже не на 5 частин, а тільки на 4, що дозволить внутрішнім посиланням документа отримати по одній чверті, а не по одній п'ятій максимального ваги, що здатна віддати дана вебсторінка.

Начебто дрібниця, але якщо у вашого ресурсу тисяча сторінок, а ви закриєте від індексації кілька наскрізних зовнішніх посилань (які будуть присутні на всіх документа, наприклад, зі лічильників відвідувань ), То сумарний приріст статвеса буде відчутним. А він адже безпосередньо впливає на стан вашого ресурсу у видачі Яндекса і Гугла при ранжируванні (природно, при інших рівних умовах оптимізації).

Думаю, що з питанням, навіщо закривати зовнішні гіперпосилання від індексації, ми розібралися і тепер залишилося тільки з'ясувати, а як це зробити? Раніше було все просто - укладаєте непотрібну вам гіперпосилання в відкриває і закриває тег noindex для того, щоб її не брав до уваги Яндекс, а в Html тег посилання A прописуєте атрибут rel = "nofollow" (для Google), наприклад, так:

<Noindex> <a rel="rel nofollow" href="http://сайт.ru/"> Зовнішній ресурс </a> </ noindex>

У WordPress для автоматизації процесу закриття від індексації всіх зовнішніх посилань можна використовувати, наприклад, плагін WP-NoRef . При його використанні, якщо в тег гіперпосилання прописати спеціальний клас, вона залишиться відкритою для індексації пошуковими системами. Це може знадобитися, наприклад, при проставленні линка в постовому або рекламному огляді.

Статична вага не передавався по закритій таким чином гіперпосиланням і внутрішні сторінки вашого сайту, в результаті, отримували трохи більше його значення, ніж у випадку з відкритою зовнішньою посиланням. Але так було раніше, а зараз все стало дуже і дуже важко.

Це стосується тільки утримання статвеса на сайті. Тут важливо розуміти, що, наприклад, в коментарях просто необхідно закривати лінки від індексації, бо велика кількість посилань на спамние ресурси (ви в змозі перевірити всі ресурси коментаторів?) Зробить ваш проект теж спамние в очах пошукових систем.

Отже, повернемося до того, що Google змінив алгоритм роботи rel = "nofollow" - тепер по посиланню, в яку вставлений цей атрибут, статичну вагу на документ передаватися не буде, але в той же час це не збільшить частку ваги, переданого на внутрішні сторінки , по проставленим з даного документа внутрішнім гіперпосиланнями.

Якщо повернутися до нашого прикладу з басейном і трубами, то ситуація з rel = "nofollow", яка була до нововведення, може бути представлена ​​як перекривання вентиля на трубі, що веде на інший ресурс. І при цьому більше води (статичної ваги) перетікав за рештою трубах (внутрішнім).

А ось поточна ситуація виглядає, як видирання труби зовнішньої з коренем - контрольний вагу вже не потече на зовнішній ресурс, а й у нас в басейні залишиться дірка, а отже, внутрішні сторінки вашого ресурсу як і раніше будуть недоотримувати статичної ваги.

Як Яндекс враховує rel nofollow і noindex

Це ми всі говорили за Гугл, а яка ситуація з використанням rel = "nofollow" для Яндекса, адже це наш незабутній лідер пошуку в рунеті. Тут все багато туманніше, бо однозначних суджень немає з цього питання.

Але схоже, що дзеркало рунета, після того як стало враховувати rel nofollow в тегах гіперпосилань, зняв з noindex будь-який вплив на заборону індексації посилань.

Тепер noindex служить одній єдино мети - закривати від індексації в Яндексі і Рамблері деякі фрагменти тексту. І якщо використовувати його для посилань, то він просто заборонить цим пошуковим системам індексувати текст (анкор), а ось сама гіперпосилання і передається по ній статвес як і раніше будуть враховуватися і братися до уваги.

Інше питання, як Яндекс враховує rel nofollow? Копіює він схему роботи у старого Google або ж відразу взяв на озброєння перероблений алгоритм розрахунку? Особисто мені важко відповісти на це питання, але вважаю, що варто розраховувати саме на найгірший варіант.

Тоді виходить, що у нас з вами вже не залишилося інструментарію, що дозволяє повноцінно закрити від індексації посилання, та так, щоб не було витоку ваги з сайту в порожнечу.

Як і раніше ми можемо закрити від індексації цілі сторінки або гіперпосилання на них за допомогою мета тегу Robots, призначення якого описано в статті наведеної на початку публікації, але ось з окремо взятими посиланнями виникають складності і rel nofollow перестав бути вдалим рішенням для цієї проблеми.

Можна, звичайно ж, проставляти зовнішні гіперпосилання через редіректи або Джава, але Google їх уже навчився враховувати, а Яндекс, якщо ще і не навчився, скоро обов'язково навчиться. У зв'язку з цим взагалі не зрозуміло як бути з беклінк з коментарів і лічильників відвідувань. Вони з будь-якого виходить будуть смоктати статичну вагу з сайту в порожнечу (при закритті їх в нофоллоу), або на ресурси коментаторів або лічильників (в разі відмови від його використання).

Деякі веб-майстри, до речі, використовують в коментарях external nofollow, хоча це тут зовсім не має на увазі закриття зовнішніх гіперпосилань, а позначає відкриття сторінки в зовнішньому вікні (аналог атрибута target = "_ blank", який в XHTML став не дійсним, тобто не відповідає стандартам), але цей external працювати буде тільки в зв'язці ще й зі спеціально написаним скриптом на javascript. Загалом, це вже зовсім з іншої теми і до закриття від індексації ніякого відношення не має.

Власне, я вирішив спробувати взагалі прибрати беклінков з коментарів і подивитися як це вплине на загальний стан мого блогу як в Гуглі, так і в Яндексі. Якщо змін в кращу сторону не буде, то поверну все як і було. Експеримент вийде, напевно, репрезентативним, бо коментарів у мене близько 6 000 і більшість з них мають беклінков на ресурс коментатора.

Якщо комусь цікаво, то прибрати посилання з коментарів WordPress досить просто. Вам потрібно буде за допомогою ftp клієнта (менеджера) FileZilla підключитися по FTP і відкрити на редагування файл comments.php з папки з використовуваної вами теми Вордпресс. У ньому вам потрібно знайти місце, де прописаний наступний шматочок коду:

<? Php comment_author_link ()?>

і замінити його на трохи змінений варіант:

<? Php comment_author ()?>

А так же для того, щоб прибрати з форми додавання нового коментаря рядок для введення URL, вам потрібно буде видалити подібну ділянку коду:

<P> <input type = "text" name = "url" id = "url" value = "<? Php echo $ comment_author_url;?&gt;" Size = "28" tabindex = "3" class = "textarea" /> <label for = "url"> <? php _e ( '<acronym title = "Uniform Resource Identifier"> URI </ acronym>'); ?> </ Label> </ p>

Якщо наведена мною теорія щодо поточного стану з rel nofollow і noindex виявиться правдивою, то має відбутися поступове збільшення накопиченого на блозі статичної ваги, що не забуде позначитися на позиціях сайту в пошуковій видачі. Загалом, подивимося.

PS Зараз найбільш дієвим способом закриття посилань і контенту від індексації пошуковими системами є прибирання їх в Аякс. Про це я писав у статті про Технічний аудит і внутрішню оптимізацію (Пункт номер 6 під другим підзаголовком).

Удачі вам! До швидких зустрічей на сторінках блогу KtoNaNovenkogo.ru

Збірки по темі

Використовую для заробітку