коллеги, есть вариант закрыть от индексации гугла страницы со 100% гарантией (ну кроме 404)? упорно обходит robots.txt, в консоли показывает, что проиндексировано не смотря на роботс. Проставлять на каждой странице meta robots нет технической возможности. Уже и вручную исключал - все равно лезет и сканирует бот.
Речь о страницах блога типа /tag/2019/ и другие по темам. Т.е. чисто для фильтра используемые, но много лет они индексировались хотя никакой смысловой нагрузки не несут и не содержат уникального контента.

Изолируйте эти страниц от сайта так, чтобы не было инлинкс на них. Проверить где есть ссылки можно при помощи screaming frog.

Может в параметрах попробуйте указать что бы не индексировал

О, у меня 5 мая не в ноль, но раза в 2 траф рубанулся по нескольким проектам. Я пока не сильно кипишую по этому поводу. Подожду ещё дня 2-3.

Gsc

В любом случае если ты был на 1 месте, а стал на 3 то кто-то занял первое место. В этот апдейт скорей больше новых сайтов получили долю трафа, а не лишь горстка, поэтому разрыв не так заметен

Ну вам не кажется что выводы которые вы делаете преждевременные и выдачу гугла всегда "трясло" на +- позиции.

В серых

Они волатильные от природы.

Может в параметрах попробуйте указать что бы не индексировал

коллеги, есть вариант закрыть от индексации гугла страницы со 100% гарантией (ну кроме 404)? упорно обходит robots.txt, в консоли показывает, что проиндексировано не смотря на роботс. Проставлять на каждой странице meta robots нет технической возможности. Уже и вручную исключал - все равно лезет и сканирует бот.
Речь о страницах блога типа /tag/2019/ и другие по темам. Т.е. чисто для фильтра используемые, но много лет они индексировались хотя никакой смысловой нагрузки не несут и не содержат уникального контента.

параметры - это настройка сканирования, не запрет на индекс. тот же роботс, только серверный.

настройте по ним ответ X-Robots-tag