Недавно обратила внимание, что Яндекс индексирует страницы типа _https://адрессайта/page/3/ Не помню точно, но мне кажется, что раньше они не были в индексе. Если они не должны индексироваться, то как их закрыть от индексации?
Ну там же обычное правило для рубрик: если тексты не дублируют содержимое самой записи, то оставляем в индексе. Если надо закрыть, то в AllInOneSeo есть такая галочка, стоит по умолчанию. В остальных - не знаю.
Сама недавно эту тему изучала, прописала в страницах пагинации <meta name="robots" content="noindex,follow" /> Файл robots может игнорировать гугл, у меня по крайней мере давненько он индексировал то, что в нем было закрыто, потом читала что он реагирует прежде всего на meta name="robots" и может игнорировать роботс. Некоторые делают вот так <link rel="canonical" href="https://site.ru/razdel"/> т.е. вторая и последующая страница ссылается на первую страницу раздела, в этом случае я так понимаю тоже страницы пагинации не индексируются. Когда понажимаете свои галочки в настройках, то проверьте что получилось в коде - видела недавно когда смотрела а как у других, что было 2 meta name="robots" - один с плагина Яаста, второй после плагина и при этом он давал разные инструкции один запрещает, второй разрешает.
Так не закрывает. Закрывает только вот так: Disallow: */page/ В общем, закрыла в роботсе. Что-то меня смущает наличие в индексе этих страниц. При этом не помню, чтобы они раньше индексировались, хотя и не были закрыты. Опять же есть вероятность, что это я сама сделала.
Подскажите пожалуйста, в роботсе есть такая строка Disallow: /?paged=* Что она закрывает? Страницы пагинации? Нет? А то что то посмотрела в поиске - вроде правильно должно быть для пагинации так: Disallow: /?page=*
Девочки, а подскажите. Такое нормально или нет? У меня это получается попадает в индекс, а потом удаляется.