Noindex
Значення noindex для HTML мета-тегу позначає, що інтернет-боти не повинні індексувати вебсторінку.[1][2] Причинами цього може бути потреба вказати для ботів не індексувати велику базу даних, сторінки з тимчасовим вмістом, версії для друку або ті, які потребують дещо більшої приватності тощо. Однак, через те, що цей тег носить лише декларативний характер, автор конкретного бота може ігнорувати цей тег. Конкретні інтерпретації тегу noindex можуть відрізнятися в різних пошукових механізмах.
Відключення індексування цілої сторінки ред.
<html>
<head>
<meta name="robots" content="noindex">
<title>Цю сторінку не потрібно індексувати</title>
</head>
Можливі значення параметра content: "none", "all", "index", "noindex", "nofollow", and "follow". Комбінації значень теж можливі,[1] наприклад:
<meta name="robots" content="noindex, follow">
Директиви для обраних ботів ред.
Директива noindex може бути застосована для конкретного бота з вказанням імені бота у значенні параметра name.
Для прикладу, щоб заблокувати бота Google's,[3] рекомендує використовувати:
<meta name="googlebot" content="noindex">
Для бота MSN's bot можна вказати:
<meta name="msnbot" content="noindex">
robots.txt file ред.
Протокол винятків для роботів може також бути застосованим, щоб запобігти скануванню ботами.
Відключення індексування частини сторінки ред.
Існують техніки для відключення частини сторінки від індексування для деяких ботів. Однак, Googlebot не розпізнає жодної такої техніки.
Тег <noindex> ред.
Був запропонований російською пошуковою системою Яндекс. Деякі інші пошуковики теж підтримують цей тег.
<p>
Do index this text.
<noindex>Don't index this text.</noindex>
<!--noindex-->Don't index this text.<!--/noindex-->
</p>
Див. також ред.
- Атрибут Nofollow
- Robots.txt
Посилання ред.
- ↑ а б Robots and the META element [Архівовано 7 травня 2021 у Wayback Machine.], Official W3 specification
- ↑ About the Robots <META> tag. Архів оригіналу за 30 травня 2021. Процитовано 15 травня 2018.
- ↑ Using meta tags to block access to your site [Архівовано 12 квітня 2010 у Wayback Machine.], допомога Google Webmasters Tools