0 Пользователей и 1 Гость просматривают эту тему.
  • 2 Ответов
  • 1058 Просмотров
*

ivankoby

  • Захожу иногда
  • 81
  • 1 / 0
Ответьте по robots.txt
« : 15.10.2009, 17:49:53 »
Здравствуйте уважаемые форумчане! Правильно ли я создал  !robots.txt - Нужно запретить все динамичесские страницы... а то ОЧЕНЬ много дубляжей. Хотелось оставить иключительно лишь страницы материалов, разделов и категорий. Благодаре заранее за ответы.

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /forums/
Disallow: /forum/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /umor/
Disallow: /jdownloads/
Disallow: /*.php$
Disallow: /content/$
Disallow: /index2.php$
Disallow: /index.php$
Disallow: /*itemid*
Disallow: /*view*
Disallow: /*task*
Disallow: /*id*
Disallow: /*option=*
Disallow: /*component*
Disallow: /*letter*
Disallow: /*threaded*
Disallow: /*replyto*
Disallow: /*catid*
Disallow: /*func=*
Disallow: /*bot.html$
Disallow: /*AdsManagerTab*
*

tysson

  • Захожу иногда
  • 260
  • 2 / 0
Re: Ответьте по robots.txt
« Ответ #1 : 07.12.2009, 12:29:11 »
Было бы интересно услышать ответ на данный вопрос
*

_ib_

  • Давно я тут
  • 673
  • 100 / 8
Re: Ответьте по robots.txt
« Ответ #2 : 07.12.2009, 12:59:58 »
старые не СЕФ ссылки перенаправляются обычно СЕФом на новые ссылки через 301 редирект и это нормально, что поисковики открывают иногда старые ссылки, через некоторое время перестанут или частично перестанут. Блокировать старые ссылки думаю неправильно, делаете 301 редирект через СЕФ (если поддерживает) или в htaccess.
Легальные шаблоны и дёшево!  + скидки до 50% для шаблонов клуба Joomlart, RocketTheme, Yootheme и Gavick.

при интересе пишите в личку или на мыло: "p" точка "d" собака gmx.de
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Ещё раз о Robots.txt

Автор hudoy

Ответов: 6
Просмотров: 965
Последний ответ 12.03.2011, 18:00:15
от hudoy
Параметр robots

Автор mastainfasta

Ответов: 2
Просмотров: 1193
Последний ответ 09.01.2011, 02:02:45
от oleggrz
Как добавить рекламу на сайт - в левой или правой колонке - кто знает ответьте.

Автор leonidsorocin

Ответов: 14
Просмотров: 3905
Последний ответ 01.08.2010, 02:33:01
от iluho
Настройка robots.txt для версии 1.5.8.

Автор MakcPer

Ответов: 4
Просмотров: 1630
Последний ответ 07.10.2009, 23:05:39
от blikb
Ошибки формат документа не поддерживается (robots.txt , яндекс)

Автор UserName900

Ответов: 1
Просмотров: 966
Последний ответ 01.10.2009, 09:39:05
от UserName900