Привет, #вопрос
X-Robots-Tag: noindex запрещает роботам индексировать страницу, но будут ли индексироваться ссылки которые есть на этой странице ? как это делает <meta name="robots" content="noindex, follow">.
====
и есть ли смысл закрыть карту сайта.html от индексации поисковиками?, кто как делает, какой опыт.