tombin

Вопрос по robots

4 сообщения в этой теме

Копался в вебмастере яндекса и нашел кучу страниц вида "/index.php?cstart=71&do=lastcomments".
Как правильно закрыть сие чудо в роботс.тхт от индексации? Не очень силен в этих роботсах с их слешами, звездачками и тд и тп

Прописано на данный момент вот так:

 

Цитата

Disallow: /?do=lastcomments

 

0

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Зачем закрывать комментарии? Если можно тупо закрыть индексацию ссылкам в комментариях допустим

0

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
24 минуты назад, sisadmin сказал:

Зачем закрывать комментарии? Если можно тупо закрыть индексацию ссылкам в комментариях допустим

А на кой хрен они в выдаче нужны отдельной страницей, еще с пагинацией на 500 страниц? Контент дублируется в добавок (комменты на страницах с фильмами и на странице с комментами).

Отбой. Забыл, что донбот стоит, дописал тег, все закрылось. Но можете ответить, мало ли кому пригодиться когда-нибудь.

0

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Теперь еще вопрос. Нашел вот таких страниц гору:

 http://***/index.php?do=stoptime&id=2140&action=count

 

Откуда они берутся и что это? И как бы их закрыть?

0

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Создайте аккаунт или войдите для комментирования

Вы должны быть пользователем, чтобы оставить комментарий

Создать аккаунт

Зарегистрируйтесь для получения аккаунта. Это просто!


Зарегистрировать аккаунт

Войти

Уже зарегистрированы? Войдите здесь.


Войти сейчас