Значення noindex для HTML мета-тегу позначає, що інтернет-боти не повинні ідексувати вебсторінку.[1][2] Причинами цього може бути потреба вказати для ботів не індексувати велику базу даних, сторінки з тимачсовим вмістом, версії для друку або ті, які потребують дещо більшої приватності тощо. Однак, так як цей тег носить лише декларативний характер, автор конкретного бота може ігнорувати цей тег. Конкретні інтерпртетації тегу noindex можуть відрізняютися в різних пошукових механізмах.

Відключення індексування цілої сторінкиРедагувати

<html>
<head>
  <meta name="robots" content="noindex">
  <title>Цю сторінку не потрібно індексувати</title>
</head>

Можливі значення параметру content: "none", "all", "index", "noindex", "nofollow", and "follow". Комбінації значень теж можливі,[1] наприклад:

<meta name="robots" content="noindex, follow">

Директиви для обраних ботівРедагувати

Директива noindex може бути застосована для конкретного бота з вказанням імені бота у значенні параметру name.

Для прикладу, щоб заблокувати бота Google's,[3] рекомендує використовувати:

<meta name="googlebot" content="noindex">

Для бота MSN's bot можна вказати:

<meta name="msnbot" content="noindex">

robots.txt fileРедагувати

Протокол винятків для роботів може також бути застосованим, щоб запобітги скануванню ботами.

Відключення індексування частини сторінкиРедагувати

Існують техніки для відключення частини сторінки від індексування для деяких ботів. Однак, Googlebot не розпізнає жодної такої техніки.

Тег <noindex>Редагувати

Був запропонований російською пошуковою системою Яндекс. Деякі інші пошуковики теж підтримують цей тег.

<p>
Do index this text.
<noindex>Don't index this text.</noindex>
<!--noindex-->Don't index this text.<!--/noindex-->
</p>


Див. такожРедагувати

ПосиланняРедагувати

  1. а б Robots and the META element [Архівовано 7 травня 2021 у Wayback Machine.], Official W3 specification
  2. About the Robots <META> tag. Архів оригіналу за 30 травня 2021. Процитовано 15 травня 2018. 
  3. Using meta tags to block access to your site [Архівовано 12 квітня 2010 у Wayback Machine.], допомога Google Webmasters Tools