I
Помогает, но контент льют больше, дневного лимита.
Size: a a a
2020 May 03
Ri
Помогает, но контент льют больше, дневного лимита.
свяжись с яндексом, попроси апнуть лимиты
I
свяжись с яндексом, попроси апнуть лимиты
Попробую, а с Гуглом есть такая тема?
Ri
Попробую, а с Гуглом есть такая тема?
если и есть то мне не известна
I
Ок, спасибо
ЮТ
Зачем советовать то, что не работает? Это я про оригинальные тексты Яндекса.
ДD
Да, этот вариант норм, но не будем ли мы таким образом облегчить жизнь воришкам?
Ну, не пишите адрес в роботс, а напрямую закидывайте в консоль
Ri
Зачем советовать то, что не работает? Это я про оригинальные тексты Яндекса.
а кто советует-то?
DB
В целом немного поясню, у нас тырят контент:статьи, описания к товарам и т.д. Пингование через вебмастеры никак не успевает за темпом размещения контент. Возникла мысль, может ли корректно настроеный last-modified каким-то образом решить проблему?
Баньте тырялщиков. Обычно автоматом парсят. Поройтесь в логах, посмотрите на левые User Agent и заблочьте их. Посмотрите с каких хостнгов парсят. Если всякие Contabo - в бан всю их сетку.
I
Да, будем блочить, спасибо
DB
У меня почти ежедневное развлечение. Сайт контентный на wordpress?
2020 May 04
I
У меня почти ежедневное развлечение. Сайт контентный на wordpress?
Да это геморр ещё тот, помимо блокировки пассажиров, нужно ещё успеть сообщить пс, что контент новый и размещен впервые у нас. Поможет ли в этом случае last-modified и настройка frequency в sitemap?
I
Лимита в вебмастерах не хватает
DB
Да это геморр ещё тот, помимо блокировки пассажиров, нужно ещё успеть сообщить пс, что контент новый и размещен впервые у нас. Поможет ли в этом случае last-modified и настройка frequency в sitemap?
Не поможет. Last-modified больше для повторных заходов, нежели первых.
VS
Когда меня дичайше парсили, я каждому посетителю отдавать в контент IP-адрес в base64.
Так он попадал на акцептор и так выяснился IP с которого парсят.
Потом тупо подмена контента на порнушный по IP и со временем отучил
Так он попадал на акцептор и так выяснился IP с которого парсят.
Потом тупо подмена контента на порнушный по IP и со временем отучил
DB
Лимита в вебмастерах не хватает
Гляньте в логи. Часто воры имеют юзер агента wordpress. Нужно его заблочить, но добавить в белый список себя, если сайт на wp
SS
Да это геморр ещё тот, помимо блокировки пассажиров, нужно ещё успеть сообщить пс, что контент новый и размещен впервые у нас. Поможет ли в этом случае last-modified и настройка frequency в sitemap?
Ни last, ни frequency не помогут
I
Большое спасибо за информацию
I
Когда меня дичайше парсили, я каждому посетителю отдавать в контент IP-адрес в base64.
Так он попадал на акцептор и так выяснился IP с которого парсят.
Потом тупо подмена контента на порнушный по IP и со временем отучил
Так он попадал на акцептор и так выяснился IP с которого парсят.
Потом тупо подмена контента на порнушный по IP и со временем отучил
Вы не могли бы подробнее объяснить?
VS
Вы не могли бы подробнее объяснить?
В контент, до него внутрь или после, добавляется что-нить в стиле
В результате в контент уйдёт строка типа MTI3LjAuMC4x, это пример.
Ждём когда снова пропарсят, смотрим контент на акцепторе.
Находим, декодируем, получаем IP-адрес с которого парсили.
Анализируем логи по этому IP, может будет зацепка на будущее, баним, абузим, придумываем иные казни египетские.
<?php
print base64($_SERVER['REMOTE_ADDR']);
В результате в контент уйдёт строка типа MTI3LjAuMC4x, это пример.
Ждём когда снова пропарсят, смотрим контент на акцепторе.
Находим, декодируем, получаем IP-адрес с которого парсили.
Анализируем логи по этому IP, может будет зацепка на будущее, баним, абузим, придумываем иные казни египетские.