Вопрос по robots.txt

12
se_ost
На сайте с 08.08.2011
Offline
53
1187

В выдаче Яндекса висит сайт русского света http://www.russkiysvet.ru/ и мешает попасть в ТОП.

Хотя в robots.txt уже давно написано:

User-agent: *
Disallow: /
User-agent: Yandex
Disallow: /

Почему Яндекс не закрывает его?

когда релиз (https://when-release.ru)
[Удален]
#1

На сколько давно?

se_ost
На сайте с 08.08.2011
Offline
53
#2

мониторю месяца 2 уже

[Удален]
#3

)) странно. Ну или дальше ждать, или писать Платону.

F7
На сайте с 22.05.2010
Offline
89
#4
se_ost:
мониторю месяца 2 уже

один из тех случаев, когда Яндекс конкретно тупит)

Тут может быть ваша подпись )))
Delarante
На сайте с 13.07.2008
Offline
69
#5
se_ost:
мониторю месяца 2 уже

Во-первых, добавьте пустой перевод строки перед User-agent: Yandex

Во-вторых, убедитесь что Яша вообще видит ваш роботс.

Я два раза вбил ваш сайт в анализатор, он не видит ваш роботс...

http://webmaster.yandex.ru/robots.xml

Посмотрите по логам, заходит ли бот яндекса за роботсом и получает ли он код 200...

F
На сайте с 13.11.2009
Offline
252
#6
Delarante:
Во-первых, добавьте пустой перевод строки перед User-agent: Yandex

Во-вторых, убедитесь что Яша вообще видит ваш роботс.
Я два раза вбил ваш сайт в анализатор, он не видит ваш роботс...
http://webmaster.yandex.ru/robots.xml
Посмотрите по логам, заходит ли бот яндекса за роботсом и получает ли он код 200...

это же не его сайт, как он логи посмотрит.

ТС, взломал чтоли сайт то? Сам роботс прописал такой туда? Думаю сам хозяин не решился бы завалить довольно таки раскрученный ресурс

bon_eur
На сайте с 09.06.2012
Offline
40
#7
Delarante:
Я два раза вбил ваш сайт в анализатор, он не видит ваш роботс...
foran:
ТС, взломал чтоли сайт то? Сам роботс прописал такой туда? Думаю сам хозяин не решился бы завалить довольно таки раскрученный ресурс

Может, хозяин сайта не отдает robots.txt поисковикам, пуская пыль в глаза конкурентам?

[Удален]
#8
foran:
Думаю сам хозяин не решился бы завалить довольно таки раскрученный ресурс

А мож хозяин жмот и кидало несчастных оптимизаторов практикует? .. ))

anndielm
На сайте с 02.05.2012
Offline
126
#9

А никто не пробовал загрузить и проверить его на валидность в яндексе ? )

Файл не доступен, яша просто до него не доберается

Дмитрий Удимов
На сайте с 05.05.2010
Offline
274
#10
anndielm:
А никто не пробовал загрузить и проверить его на валидность в яндексе ? )
Файл не доступен, яша просто до него не доберается

Вот так вот подробности и выясняются )

Топвизор — аккредитованный регистратор доменов .ru и .рф (https://topvisor.com/ru/domain-registration/) — честная цена 299 руб. за регистрацию и продление.
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий