Яндекс надорвался на дорвеях, а я от смеха. А как же прикажете его понимать?
Недавно перековал я один красивый "белый" сайт на дорвейную тематику и прописал в robots.txt
User-agent: Yandexчто означает "извини, Яндекс, пока постой в сторонке, а эти доры для буржуев". Но не тут-то было, прожорливый и любознательный малыш Яндекс пришёл на следующий день и бойко скушал 8к страниц.
Disallow: /
Попробовал я попросить его по хорошему и как честный спамер поплёлся удалять сайт вручную, ввёл url, выбрал опцию "удалить весь подкаталог (все URL, начинающиеся с данной строки)" и смело нажал кнопку "Удалить". Яндекс сказал, что Все документы по адресу http://www.domain.tld будут удалены из базы Яндекса в течение нескольких дней - я поверил.
"Несколько дней" уже давно минуло, а непослушный малыш Яндекс ежедневно как оголтелый носится по сайту, лопает доры и добавляет их в выдачу. Эх, не надорвался бы :)
Зато на нормальных дорах, безредиректных, ежедневно обновляемых, яндекс отыгрывается. Не более паоловины банит сразу. остальные за 2-3 дня. То же самое и с сателитами и СДЛами. А гвонодоры с редиректом кушает как миленький
ОтветитьУдалить