1   Вниз
0 Пользователей и 1 Гость просматривают эту тему.
  • 2 Ответов
  • 205 Просмотров
*

klipius

  • Захожу иногда
  • 95
  • 2 / 0
100500-й вопрос по robots.txt
« : 19.12.2018, 10:53:51 »
Всем бобра!

Борюсь с дублями в нашей ненаглядной CMS  *ОХ-Х-Х* ...тема вечная как мне кажется, но и сидеть свесив ножки, не наш метод. Потому хелп рОбяты! Сайт - https://uplaptop.pro

Пробовал закрыть все и разрешить только конкретные урлы, получил следующее - https://yandex.ru/yandsearch?text=host%3Auplaptop.pro%20%7C%20host%3Awww.uplaptop.pro&lr=225

Лезут дубли из категорий... А надо их убрать! Поизучал Вебмастер.Хелп, там такое написано:

Код
Disallow: /page? # запрещает обход страниц, URL которых содержит параметры
Смущает знак вопроса, после page, нужен ли он? Эти рукожопы из Яндекс специально видимо так Хелп заполняют... Т.е. непонятно, знак вопроса это параметр или часть урла...

Подойдет ли конструкция:

Код
User-agent: *
Disallow: /
Disallow: /14-portfolio #
Disallow: /13-portfolio #
Allow: /
Allow: /intel-xeon-e5450
Allow: /sborka-mining-ferm


sitemap: http://uplaptop.pro/sitemap.xml

Host: uplaptop.pro
« Последнее редактирование: 19.12.2018, 10:57:52 от klipius »
Записан
*

voland

  • Легенда
  • 10307
  • 555 / 108
  • Эта строка съедает место на вашем мониторе
Re: 100500-й вопрос по robots.txt
« Ответ #1 : 19.12.2018, 11:29:28 »
JL NoDoubles
Записан
*

klipius

  • Захожу иногда
  • 95
  • 2 / 0
Re: 100500-й вопрос по robots.txt
« Ответ #2 : 19.12.2018, 12:38:49 »
Стоит у меня этот плагин, толку ноль - https://yandex.ru/yandsearch?text=host%3Auplaptop.pro%20%7C%20host%3Awww.uplaptop.pro&lr=225
Записан
1   Вверх
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Правильный robots.txt? [вопросы/обсуждение]

Автор wishlight

 Ответов: 430
Просмотров: 183234 		Последний ответ 17.11.2018, 23:37:15
от Alexbsl
Вопрос по отличию SEO MODx и Joomla

Автор vovafit

 Ответов: 6
Просмотров: 417 		Последний ответ 25.08.2018, 15:20:56
от rkron
Вопрос по robots.txt и видимости сайта роботами

Автор Pavel_L

 Ответов: 3
Просмотров: 443 		Последний ответ 17.06.2018, 12:18:48
от Pavel_L
Яндекс отменяет поддержку директивы Host в robots.txt

Автор ChaosHead

 Ответов: 1
Просмотров: 870 		Последний ответ 21.03.2018, 12:16:35
от khan-alex
Как правильно прописать команды в файл htaccess: вопрос от новичка?

Автор Artemio

 Ответов: 2
Просмотров: 401 		Последний ответ 26.02.2018, 16:30:03
от Artemio