0 Пользователей и 1 Гость просматривают эту тему.
  • 6 Ответов
  • 990 Просмотров
*

gaploger

  • Осваиваюсь на форуме
  • 72
  • 0
Всем привет! Вопрос такой: на сайте много страниц с дублями, я их в robots.txt запретил к индексации к примеру пунктом Disallow: */katalog/. Яндекс их не индексирует, а вот Google индексирует, просто добавляет в выдаче к ним строку "Описание веб-страницы недоступно из-за ограничений в файле robots.txt. " Я хотел узнать можно их убрать из индекса Google к примеру если перенаправить на страницу ошибки 404, он ведь их тогда удалит со временем. Если да, то какой код написать в htacess, или есть другой более оптимальный способ?
*

ELLE

  • Support Team
  • 4598
  • 867
если перенаправить на страницу ошибки 404
если перенаправить, то это будет только для вас 404, а для Google это будет ответ 301
Кроме того, чтобы Google выкинул страницы из индекса, в robots надо ему разрешить заходить на эти страницы, а дальше можно сделать или так - http://joomlaforum.ru/index.php/topic,193446.msg1186257.html#msg1186257
или через htaccess - склеить дубли с реальными страницами
*

gaploger

  • Осваиваюсь на форуме
  • 72
  • 0
Сделал вот так, типа удалил документ через htaccess:

RewriteCond %{THE_REQUEST} ^.*/ajax_attrib_select_and_price/(.*)$
RewriteRule .* - [G]

При переходе выдает:

Gone
The requested resource
/katalog/product/ajax_attrib_select_and_price/21.html
is no longer available on this server and there is no forwarding address. Please remove all references to this resource.

Как думаете Google удалит их из индекса, и надо ли что бы это произошло, открывать эти страницы в роботсе?
*

ELLE

  • Support Team
  • 4598
  • 867
Да удалит, только атрибуты у вас не будут работать (если они когда-нибудь понадобятся)
*

gaploger

  • Осваиваюсь на форуме
  • 72
  • 0
Про атрибуты я как то не подумал, спасибо, если вдруг понадобятся мне все таки эти атрибуты, придется менять тактику.
*

Aleks45

  • Осваиваюсь на форуме
  • 36
  • 0
Да удалит, только атрибуты у вас не будут работать (если они когда-нибудь понадобятся)
Как же тогда все таки удалить из Google такие страницы product/ajax_attrib_select_and_price/ robots не помогает, в интернет магазине 200 товаров и у каждого 5 атрибутов, скоро в индекс вылезут все такие страницы, подскажите пожалуйста что делать?
*

artful knave

  • Осваиваюсь на форуме
  • 68
  • 8
*удалено за ненужностью*
« Последнее редактирование: 28.10.2015, 14:30:10 от artful knave »
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

/index.php\?option=com.... как закрыть от индексации подобные страницы\?

Автор roma_sanbl4

Ответов: 2
Просмотров: 33
Последний ответ 20.09.2017, 10:33:53
от roma_sanbl4
Не дело это - закрывать от индексации страницы с пагинацией

Автор ChaosHead

Ответов: 46
Просмотров: 6771
Последний ответ 22.07.2017, 14:50:51
от Guran
Редирект со страницы пагинации

Автор threemonkeys

Ответов: 0
Просмотров: 139
Последний ответ 14.06.2017, 20:04:14
от threemonkeys
Выпадают страницы из поиска

Автор scenann

Ответов: 1
Просмотров: 345
Последний ответ 08.05.2017, 12:16:49
от flyingspook
Как убрать цикличность при редиректе с одной страницы сайта на другую страницу того же сайта?

Автор tao2en

Ответов: 2
Просмотров: 172
Последний ответ 01.03.2017, 01:06:19
от tao2en