Nofollow- це атрибут, який прописується для певного посилання або всіх посилань на сторінці robots з метою заборони пошуковим роботам на перехід по них.
Noindex– це атрибут, який закриває текст на сторінці.
Тобто, noindex відповідає за контент у документі та заборону на індексацію його, у той час як nofollow – за посилання.
Правила застосування і навіщо потрібен nofollow?
Щоб зрозуміти, в яких випадках може взагалі стати в нагоді цей атрибут, розглянемо, як до нього ставляться найпопулярніші пошукові системи.
- Яндекс.Коли на вашому ресурсі містяться розділи, призначені спеціально для обговорення записів, написання коментарів до статей або форум, важливо стежити за тим, які вихідні посилання залишають відвідувачі. Бажано кожен коментар. Завдяки цьому власник сайту зможе запобігти розміщенню різних шкідливих посилань від спамерів. Хоча пошуковик і не враховує їх, спам сильно впливає на репутацію веб-ресурсу і до нього може бути використаний фільтр. У зв'язку з цим слід перевіряти всі коментарі, і якщо є якісь сумніви щодо якості посилання, пропишіть для них атрибут rel=”nofollow”. Зараз, у зміненому посібнику Яндекс, цей текст був видалений і залишилося тільки правило застосування.
- Google.Якщо ваш сайт має розділ, де користувачі можуть коментувати записи, є великий ризик, що в коментарях з'являться посилання на шкідливі сторінки. Спамери люблять сайти з коментарями без модерації. Атрибут nofollow для спам-посилань врятує ваш ресурс та збереже його чисту репутацію в очах пошукової системи. Якщо ж ви довіряєте сайту, на який посилається відвідувач або ви самі посилаєтеся, то не потрібно прописувати nofollow. Керівництво Google про nofollow
Ці повідомлення взяті з офіційних сайтів пошукових систем. Як бачите, в Яндекс і Google написані аналогічні речі: значення nofollow потрібно використовувати у тих випадках, коли ви хочете повідомити ботам про недовіру щодо сайту, на який веде посилання.
Розглянемо більше конкретний приклад, коли для посилання потрібно прописати забороняючий атрибут:
Матеріал сумнівної якості.Якщо вам не подобається зміст сторінки, на яку відвідувач залишає посилання в коментарі, і ви не бажаєте жертвувати репутацією свого сайту, прописуйте в теги цього посилання значення . Спамери, помітивши на вашому ресурсі тенденцію, коли до неперевірених посилань додається блокуючий атрибут, незабаром припинять спроби нашкодити сайту. Якщо ж ви бачите, що користувач залишає посилання на якісний матеріал, можна видалити вручну або автоматично nofollow.
Як правильно прописати nofollow?
Це зараз nofollow дозволяє керувати кожним посиланням окремо, але колись дане значенняможна було задіяти тільки в мета-тегу, який закривав від пошукової системи всі посилання на сторінці. І для заборони переходу за окремими посиланнями вебмайстрам доводилося блокувати їх URL у .
Robots Nofollow
Ці мета-теги так і залишилися й досі. Якщо ви хочете закрити від індексації всі посилання на певній сторінці, то на цій сторінці потрібно прописати такий код:
Важливо не плутати цей тег з двома наведеними нижче кодами, content="none" і content="noindex, nofollow" блокують доступ ботів до всієї сторінки, а не тільки до її посилань. Тому, якщо ви хочете щоб сторінки індексувалися, то в жодному разі не прописуйте для них два ось ці теги:
Вище ми розглянули варіанти, як заборонити перехід пошукових роботів на всі посилання на сторінках. Але ще можна призначити заборону на перехід до конкретного заслання.
Щоб заборонити індексацію та перехід робота за посиланням, до неї треба прописати атрибут rel=”nofollow”, у коді це виглядає так:
Чи витікає вага посилання через nofollow?
Хоча Google у своїх заявах позиціонує застосування атрибуту nofollow як перехід за посиланням. І це підтвердило звернення колишнього глави компанії боротьби з пошуковим спамом, Метта Катса. Він заявив, що «Google може враховувати посилання з соціальних мереж, навіть незважаючи на nofollow».
А ось з Яндексом питання не явне. Він чітко пише у своїй документації, що цей атрибут забороняє індексацію таких посилань.
А якщо ми перейдемо в опис атрибуту robots nofollow, то вже бачимо заборону на перехід, і не слово про індексацію.
Але раніше можна було це перевірити, якщо застосувати в пошуку таку конструкцію url: ваш урл<< inlink:(“анкор ссылки”), и Яндекс нам отображал только те страницы, где содержится наш искомый . Сейчас же этот метод не работает, поисковая система Яндекс запретила использовать такую конструкцию в поиске. Поэтому можно с большей долью вероятностью сказать, что Яндекс может учитывать такие ссылки, потому что они появляются в Яндекс Вебмастер.
Загалом можна сказати, що застосування даного атрибуту для пошукових роботів не завжди є забороною, якщо сайт авторитетний.
Чи варто закривати внутрішні посилання в nofollow?
У минулому, seo оптимізатори сильно зловживали тим самим маніпулюючу вагою всередині сайту, що передається. Тому пошукова система Google заявила, що всі внутрішні посилання зазначені будуть віддавати вагу в https://www.mattcutts.com/blog/pagerank-sculpting/.
Про це у відео говорить колишній керівник пошуку Google. Відео англійською, тому увімкніть російські субтитри.
Атрибут noindex: що це і чим відрізняється від nofollow?
Багато початківців вебмайстра ламають голову, не розуміючи, чим noindex відрізняється від nofollow. Все просто:
- nofollow - застосовується до посилань
- noindex - застосовується до тексту
Якщо ви хочете заборонити текст на всій сторінці сайту для індексації, але при цьому враховувати посилання на сторінці потрібно прописати наступний код:
Якщо ви хочете закрити частину тексту, то Google не має такого атрибуту, але в Яндексі це можливо. Тег noindex був впроваджений пошуковою системою Яндекс, оскільки раніше він не розумів nofollow, а непотрібні посилання потрібно було якось закривати від роботів.
Але в 2010 році пошукова система почала працювати з атрибутом rel = "nofollow", при цьому noindex не зник, а залишився відповідати за приховування тексту. Тепер, якщо ви хочете закрити від індексації текст або, наприклад, анкор посилання, пропишіть команду:
Наприклад, це зручно було, коли Яндекс ввів новий алгоритм, який накладав санкції за seo тексти. Варто було закрити онучі тексту в noindex, і можна було вийти з-під цього фільтра, причому не втратити позиції в Google, оскільки пошукова система Google не враховує тег .
Висновки
Nofollow відповідає за перехід пошукових системза цими посиланнями як на всій сторінці, так і для певного посилання. Раніше noindex теж виконував аналогічну функцію, але тільки по відношенню до Яндексу, який згодом почав розуміти nofollow, в результаті чого значення noindex почали закривати від індексації контент на сторінці.
Власник сайту повинен грамотно використовувати атрибут nofollow і розуміти, в яких випадках це робити:
- Коли посилання веде на веб-ресурси із неякісним контентом.
- Коли ви розміщуєте комерційний контент на сторінці.
Головна задача використання nofollow- допомогти вказати пріоритетні для сканування посилання, розділити статті, що продають, від інформаційних, а також захистити сайт від спаму, який, якщо не контролювати, може призвести до зниження ранжирування або набагато гірше, вильоту ресурсу з індексу.
Для всіх інших ситуацій можна сміливо використовувати , відкриті для пошукових роботів. Репутація сайту анітрохи не погіршиться, а навіть покращиться, якщо ви залишатимете посилання на корисні для вашої цільової аудиторії сторінки. І жодної ваги ваші документи не втратять, а навпаки навіть можуть придбати за рахунок .
Щоб запобігти появі сторінки в результатах пошуку Google, вставте в HTML-код сторінки атрибут noindex або заголовок noindex у запиті HTTP. Під час сканування робот Googlebot виявить його та проігнорує сторінку, навіть якщо на неї посилаються інші сайти.
Увага! Пошуковий робот не виявить директиву noindex, якщо сторінка заблокованоу файлі robots.txt. Така сторінка може бути представлена в результатах пошуку (наприклад, якщо на ній є посилання на іншій сторінці).
Директива noindex дозволяє контролювати доступ до окремих сторінок сайту, тому її рекомендується використовувати, якщо у вас немає доступу до кореневого каталогу на сервері.
Як додати атрибут noindex
Додати директиву noindex можна двома способами. Їх результати рівнозначні, а вибір залежить від того, якою мірою ви можете керувати сервером і як здійснюєте публікацію контенту.
Тег
Щоб заблокувати більшість пошукових роботів, додайте наступний метатег у розділ
веб-сторінки:
Якщо ви хочете закрити доступ до сторінки тільки роботам Google, використовуйте такий код:
Інші пошукові системи можуть інакше інтерпретувати атрибут noindex на сторінці та показувати її у результатах пошуку.
Допоможіть нам знайти метатеги
Щоб знайти метатеги, ми повинні просканувати вашу сторінку. Якщо сторінка продовжує з'являтись у результатах пошуку, ймовірно, ми ще не просканували ваш сайт після додавання тега. Повторне сканування сторінки роботом Google можна запросити за допомогою інструмента. Інша причина – файл robots.txt блокує цю URL-адресу від робота Google, і метатег не виявляється. Щоб розблокувати вашу сторінку для Google, потрібно змінити файл robots.txt. Це можна зробити за допомогою Інструмент перевірки файлу robots.txt .
Заголовок відповіді HTTP
Замість метатегу можна повертати заголовок X-Robots-Tag. У відповіді має бути вказано значення noindex або none. Приклад HTTP-відповіді, де X-Robots-Tag забороняє роботам індексувати сторінку:
HTTP/1.1 200 OK (…) X-Robots-Tag: noindex(…)
Почнемо з того, що позначимо різні способи використання noindex і nofollow:
- Тег
- Метатеги і
Тег
Тег
Помилка №1.Основна помилка людей, які використовують цей тег, полягає в переконанні, що якщо частина будь-якого тексту вміщена між тегом, що відкривається і закривається.
Єдине, що цей тег забороняє – це поміщення вмісту в індексну базу, але цей вміст у будь-якому випадку буде прочитаний та проаналізований роботом.
Приклад: На сторінці вашого сайту розміщено певний текст, який використовує прямі входження пропозицій з інших джерел. Отже, ці пропозиції знижують унікальність тексту, а вам необхідно, щоб унікальність була 100%. Ви вирішуєте закрити ці пропозиції тегом
Абсолютно весь текст вашої сторінки буде прочитаний та оброблений роботом, і йому буде відомо, що текст вашої сторінки не є унікальним.
Сама суть тега
Припустимо, пошуковий робот зайшов на вашу сторінку і почав сканувати вміст. Раптом робот знаходить відкриття тега
Для чого тоді потрібен тег
Він потрібний безпосередньо для того, щоб заборонити роботу видавати у видачі своєї пошукової системи будь-яку інформацію. Це можуть бути, наприклад, контакти, які з будь-яких причин не повинні відображатися у видачі.
Помилка №2.Ще одна помилка, яка часто зустрічається серед власників сайтів, - це думка, що посилання, поміщене в тег
На допомогу вебмайстрам, яким необхідно, щоб робот все ж таки не враховував посилання зі сторінок, приходить атрибут, який працює як для Яндекса, так і для Google. При використанні цього атрибуту посилання все одно буде вивчено роботом і по ньому буде проведено перехід, але без nofollow за посиланням буде передана вага адресату, а з nofollow вага згорятиме.
Приклад 1:
Яндекс не індексує анкор, але враховує посилання на сайт і передає по ньому вагу
Приклад 2:
Яндекс не індексує анкор і не передає вагу за посиланням на сайт
Існує два способи написання тега
1.
2. Текст, заборонений до індексування
Другий варіант більш правильний. Оскільки тег
Метатеги і
Використання метатегу noindex у коді сторінки забороняє Яндексу (Google, знову ж таки, в даному випадку не бере участі) індексувати весь текстовий вміст сторінки, посилання будуть проаналізовані повною мірою. Тобто наявність у коді сторінки цього метатегу не є рівнозначною закриттю сторінки від індексу в robots.txt.
Наявність у коді сторінки метатегу nofollow забороняє пошуковим системам індексувати посилання на сторінках. Перейти за посиланнями зі сторінки за наявності цього метатегу роботи також не будуть. Але ось що написано за допомогою Яндекса:
«Робот не відвідає документи, якщо посилання на них стоять зі сторінки, що містить метатег зі значенням nofollow, проте вони можуть бути проіндексовані, якщо в інших джерелах на них вказані посилання без nofollow»
Підведемо підсумки
Тег
Якщо хочемо, щоб вага посилання не передавався адресату, то використовуємо атрибут nofollow. При цьому не забуваємо, що робот все одно може пройти за посиланням (якщо інформація про неї отримана з інших джерел: карта сайту, посилання) та проаналізує сторінку, на яку вона посилається. Метод працює як Яндекс, так Google.
Noindex - тег-покажчик для пошукових систем (Яндекс і Rambler), який застерігає, що частину веб-сторінки не потрібно індексувати.
Більше відео на нашому каналі - вивчайте інтернет-маркетинг із SEMANTICA
У чому різниця між noindex і nofollow
Перша суттєва відмінність їх у тому, що перший був видно раніше для Google, а другий - тільки для Яндекса та Rambler. В даний час Яндекс також навчився розпізнавати Ноуфоллоу, який працює тільки для посилань, а Ноуіндекс – для будь-якого коду сайту.
Застосування Nofollow не перетворює посилання на невидиме, а лише вказує, що нею не потрібно йти і індексувати документ, на який вона веде. Пошуковий робот індексує це гіперпосилання, але вага з сайту не передається, якщо вона веде на чужий ресурс. Працює цей атрибут для всіх пошукових систем.
Що стосується тега Noindex, то з ним працює лише Яндекс. Гугл просто проігнорує його. Використовувати його потрібно в тих випадках, коли ви хочете закрити якусь ділянку сторінки – текст, картинку чи посилання – від індексації. Пошуковик контент розпізнає, але згодом викидає з індексу. Цей захід встановлений для повного аналізу сторінки та процедури накладання можливих санкцій за порушення.
Для чого потрібний Noindex
- Закривається непотрібна/неунікальна інформація, що покращує релевантність сторінки, тому що збільшується щільність ключових фраз, відповідність до тематики, унікальність.
- Ховаються наскрізні блоки та гіперпосилання, наявність яких може призводити до песимізації.
- Приховується особиста та службова інформаціяякщо ви не хочете, щоб вона легко знаходилася через пошук.
Для чого потрібний Nofollow
- Закриття зайвих веб-посилань.
- Збереження ваги сторінки постійним.
- Розподіл певної ваги за посиланнями.
Як використовувати noindex і nofollow
Тег Noindex для будь-якого контенту застосовується так:
текст, який треба приховати , і щетекст.
Працюючи з Ноиндекс існує можливість, що знизиться валідність коду, оскільки цей тег знає лише російський поисковик. Тому рекомендується наступний варіант написання:
.
Весь текст, який треба сховати.
При цьому інші пошукові системи просто його пропустять, і валідність коду залишиться незмінною.
Атрибут Nofollow для посилань застосовується
При цьому анкор потрапляє в індекс, але пошуковик за веб-посиланням не йде, вага на сторінці залишається.
Якщо на сторінці занадто багато Нофоллоу, це може негативно позначитися на лояльності пошукових систем.
Спільне використання
Для того, щоб закрити і текстову частину, і гіперпосилання, слід дотримуватися такого написання:
Весь текст, який треба приховати анкор, та ще текст
Варіанти правильного використання Noindex та Nofollow для заборони індексації документа в цілому
Тег і атрибут, весь час ходять за ручку, і часто їх застосовують разом. Вони можуть застосовуватися в meta name=robots документа для вказівки рекомендацій щодо його індексації та переходу за веб-посиланнями. Вказівка на заборону індексації потрібна, якщо виявлено дублі сторінок, Або в мережі з'явилася конфіденційна або застаріла інформація, а в інший спосіб сторінки прибрати не можна.
У випадку, якщо ви хочете закрити всю сторінку від індексації і заборонити облік посилань, що розміщуються на ній, необхідно вказати в метаданих сторінки - наступне:
Ноуіндекс створює команду Яндексу не індексувати контент на сторінці, але робот ходить її веб-посиланнями. Тому додатковий Ноуфоллоу вказує на них не ходити. Цю вказівку сприймають як Яндекс, так і Google.
Що стосується видалення документа з індексу Google, то пошукачем передбачено альтернативний метод: запис X-Robots-Tag: noindex, nofollow. Ця вказівка закріплюється в http-заголовках, які не видно в коді сторінки.
Розповідаємо про різницю між Nofollow та Noindex, як їх правильно використовувати для посилань та приховання контенту на сайті.
Завжди слідкуйте за наявністю розглянутих у статті тегів та атрибутів у потрібних місцях, щоб отримувати саме той результат, на який ви очікуєте.
Тег НоуІндекс та Яндекс
Іноді, при внесенні технічних змін на сайті або тривалому веденні блогу, з'являються матеріали та шматки коду, які можуть зашкодити. У цій статті торкнуся, перш за все, Яндекса та опишу його «специфічний» HTML-тег noindex.
У чому тут взагалі суть?Як відомо, необхідно враховувати таке:
- матеріал (насамперед, текст) окремої сторінкимає бути унікальним
- і повинен відповідати будь-якому ключовому слову(запиту), під яке ця сторінка SEO оптимізується.
Але якщо є (або з'являються згодом) тексти або коди, що негативно впливають на ці 2 пункти, просування може погіршитися.
Що це і як впливає?
Що це
Тут може бути багато всього:
- шматки неунікальноготексту, взяті вами з чужого сайту та вставлені у вашу унікальну(спочатку) статтю,
- велика кількість кодів реклами - тизери, банери, та інша,
- безліч JavaScript-скриптів та кодів flash-додатків,
- різні блоки посилань у сайдбарі на кшталт «наші друзі»,
- купа,
- та ін.
Як впливає
Виходячи з двох пунктів списку, зазначених на початку статті, це впливає так:
- відбувається «розведення» щільності.
Тому непогано було б закрити всі зайві частини матеріалів від індексації пошуковими роботами.
Тег Noindex Яндекса та приховування коду від його роботів
На жаль (а може й ні), закрити від індексації окремі ділянки HTML-коду дозволяє лише Yandex. Можливо, згодом Google та Bing також запропонують щось аналогічне. А може їх розробники просто не вважають це необхідністю.
В загальному, тега noindex у Google немає!— особливо вказую на це через те, що в Мережі повно розмов із цього приводу. Зате пошуковик Google дозволяє приховувати всю сторінку від роботів через , а також стандартними засобами- Як і інші ПС:
Використання Noindex в Яндексі
Користуватися ним не складніше, ніж будь-яким іншим HTML-тегом. Зазвичай виглядає так:
Можливий і альтернативний варіант – тег ноіндекс у вигляді стандартного HTML-коментарю. Ось, наприклад, як можна приховати контекст від AdSense:
AdSense «загорнуть» у noindex tag
- Тобто. все те саме, але додаємо вказівку на те, що це коментар. На мій погляд, такий варіант кращий.
До речі, щоб дізнатися, де на веб-сторінці розставлені блоки тегів ноуіндекс, можна поставити:
Вони буквально підсвічуватимуть ділянки коду, загорнуті в цей тег. Щоправда, RDS bar іноді не підсвічує варіант у форматі коментаря – noindex.
Коли використати?
Як і писав вище, noindex в Яндекс потрібний для приховання непотрібних шматків коду, щоб не зменшувалась унікальність текстів та релевантність статей запитам . Буде цілком логічно, якщо виникне думка закрити все-все, крім тексту оптимізованої статті в тег- включаючи у верхньому меню, шапку сайту, коментарі та інше.
Насправді, так розганятися не варто. На це є дві причини:
- Подібні маніпуляції (якщо переборщити) можуть бути розцінені Яндексом.
- Роботи сучасних ПС здатні розрізняти, де, наприклад, знаходиться блок із статтею, а де – коментарі до неї. Yandex теж може- Десь 10 місяців тому я в них це особисто з'ясував, т.к. планував позакривати всі блоки з коментарями до Noindex.
З коментарями виходить досить цікаво. пошукачам подобається велика кількість коментарів , т.к. це свідчить про . Тому не треба переживати, що тексти коментаторів зменшать релевантність статті запиту — краще подумати про них.
Також, на мій погляд, краще закрити блоки AdSense від «очей» Яндекса (як і будь-які інші рекламні коди) — щоб ця пошукова система не вважала ваш сайт «занадто» рекламною і не застосувала. АЛЕ залишити відкритими.
Сенс у тому, що в РСЯ приймаються лише якісні ресурси з погляду Яндекса , тому наявність цієї реклами може натякнути цієї ПС про «якісності» вашого проекту та підвищити таку абстрактну характеристику, .
Noindex та закриття зовнішніх посилань
У свій час (коли Yandex не підтримував nofollow), небажані доводилося «загортати» в noindex і додатково приписувати до тегу посилання , тобто. весь код посилання, що закривається міг виглядати так:
Закриття посилань в Яндекс через ноуіндекс
Тепер дана ПС підтримує nofollow та можна обійтися без «забурчування» посилання в «noindex»і користуватися стандартним прийомом з nofollow. Докладніше про атрибут Rel = nofollow читайте .
Здається, це все, що можна розповісти про тег Noindex та Яндекс. Майте все це на увазі і використовуйте грамотно
