0 Пользователей и 1 Гость просматривают эту тему.
  • 6 Ответов
  • 1684 Просмотров
*

gaploger

  • Захожу иногда
  • 71
  • 0 / 0
Всем привет! Вопрос такой: на сайте много страниц с дублями, я их в robots.txt запретил к индексации к примеру пунктом Disallow: */katalog/. Яндекс их не индексирует, а вот Google индексирует, просто добавляет в выдаче к ним строку "Описание веб-страницы недоступно из-за ограничений в файле robots.txt. " Я хотел узнать можно их убрать из индекса Google к примеру если перенаправить на страницу ошибки 404, он ведь их тогда удалит со временем. Если да, то какой код написать в htacess, или есть другой более оптимальный способ?
*

ELLE

  • Глобальный модератор
  • 4510
  • 893 / 0
если перенаправить на страницу ошибки 404
если перенаправить, то это будет только для вас 404, а для Google это будет ответ 301
Кроме того, чтобы Google выкинул страницы из индекса, в robots надо ему разрешить заходить на эти страницы, а дальше можно сделать или так - http://joomlaforum.ru/index.php/topic,193446.msg1186257.html#msg1186257
или через htaccess - склеить дубли с реальными страницами
*

gaploger

  • Захожу иногда
  • 71
  • 0 / 0
Сделал вот так, типа удалил документ через htaccess:

RewriteCond %{THE_REQUEST} ^.*/ajax_attrib_select_and_price/(.*)$
RewriteRule .* - [G]

При переходе выдает:

Gone
The requested resource
/katalog/product/ajax_attrib_select_and_price/21.html
is no longer available on this server and there is no forwarding address. Please remove all references to this resource.

Как думаете Google удалит их из индекса, и надо ли что бы это произошло, открывать эти страницы в роботсе?
*

ELLE

  • Глобальный модератор
  • 4510
  • 893 / 0
Да удалит, только атрибуты у вас не будут работать (если они когда-нибудь понадобятся)
*

gaploger

  • Захожу иногда
  • 71
  • 0 / 0
Про атрибуты я как то не подумал, спасибо, если вдруг понадобятся мне все таки эти атрибуты, придется менять тактику.
*

Aleks45

  • Осваиваюсь на форуме
  • 39
  • 0 / 0
Да удалит, только атрибуты у вас не будут работать (если они когда-нибудь понадобятся)
Как же тогда все таки удалить из Google такие страницы product/ajax_attrib_select_and_price/ robots не помогает, в интернет магазине 200 товаров и у каждого 5 атрибутов, скоро в индекс вылезут все такие страницы, подскажите пожалуйста что делать?
*

artful knave

  • Захожу иногда
  • 68
  • 8 / 0
*удалено за ненужностью*
« Последнее редактирование: 28.10.2015, 14:30:10 от artful knave »
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Редирект для страницы с добавлением кода языка

Автор zeus07

Ответов: 0
Просмотров: 750
Последний ответ 26.06.2023, 11:25:10
от zeus07
Каким плагином можно закрыть внешние ссылки?

Автор gorbi_U

Ответов: 4
Просмотров: 1163
Последний ответ 25.02.2023, 02:29:35
от olegon
Google не индексирует страницы через ajax ссылки

Автор illimited

Ответов: 0
Просмотров: 954
Последний ответ 31.03.2022, 23:53:05
от illimited
Не дело это - закрывать от индексации страницы с пагинацией

Автор ChaosHead

Ответов: 48
Просмотров: 10379
Последний ответ 04.11.2021, 06:44:26
от Slava77
В вебмастере появляются левые страницы

Автор Dmitriy M

Ответов: 1
Просмотров: 402
Последний ответ 22.09.2021, 19:14:32
от Dmitriy M