Sign in to follow this  
Followers 0
tombin

Вопрос по robots

4 posts in this topic

Копался в вебмастере яндекса и нашел кучу страниц вида "/index.php?cstart=71&do=lastcomments".
Как правильно закрыть сие чудо в роботс.тхт от индексации? Не очень силен в этих роботсах с их слешами, звездачками и тд и тп

Прописано на данный момент вот так:

 

Цитата

Disallow: /?do=lastcomments

 

0

Share this post


Link to post
Share on other sites

Зачем закрывать комментарии? Если можно тупо закрыть индексацию ссылкам в комментариях допустим

0

Share this post


Link to post
Share on other sites
24 минуты назад, sisadmin сказал:

Зачем закрывать комментарии? Если можно тупо закрыть индексацию ссылкам в комментариях допустим

А на кой хрен они в выдаче нужны отдельной страницей, еще с пагинацией на 500 страниц? Контент дублируется в добавок (комменты на страницах с фильмами и на странице с комментами).

Отбой. Забыл, что донбот стоит, дописал тег, все закрылось. Но можете ответить, мало ли кому пригодиться когда-нибудь.

0

Share this post


Link to post
Share on other sites

Теперь еще вопрос. Нашел вот таких страниц гору:

 http://***/index.php?do=stoptime&id=2140&action=count

 

Откуда они берутся и что это? И как бы их закрыть?

0

Share this post


Link to post
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!


Register a new account

Sign in

Already have an account? Sign in here.


Sign In Now
Sign in to follow this  
Followers 0