0 Пользователей и 1 Гость просматривают эту тему.
  • 2 Ответов
  • 541 Просмотров
*

klipius

  • Захожу иногда
  • 98
  • 2 / 0
100500-й вопрос по robots.txt
« : 19.12.2018, 10:53:51 »
Всем бобра!

Борюсь с дублями в нашей ненаглядной CMS  *ОХ-Х-Х* ...тема вечная как мне кажется, но и сидеть свесив ножки, не наш метод. Потому хелп рОбяты! Сайт - https://uplaptop.pro

Пробовал закрыть все и разрешить только конкретные урлы, получил следующее - https://yandex.ru/yandsearch?text=host%3Auplaptop.pro%20%7C%20host%3Awww.uplaptop.pro&lr=225

Лезут дубли из категорий... А надо их убрать! Поизучал Вебмастер.Хелп, там такое написано:

Код
Disallow: /page? # запрещает обход страниц, URL которых содержит параметры
Смущает знак вопроса, после page, нужен ли он? Эти рукожопы из Яндекс специально видимо так Хелп заполняют... Т.е. непонятно, знак вопроса это параметр или часть урла...

Подойдет ли конструкция:

Код
User-agent: *
Disallow: /
Disallow: /14-portfolio #
Disallow: /13-portfolio #
Allow: /
Allow: /intel-xeon-e5450
Allow: /sborka-mining-ferm


sitemap: http://uplaptop.pro/sitemap.xml

Host: uplaptop.pro
« Последнее редактирование: 19.12.2018, 10:57:52 от klipius »
*

voland

  • Легенда
  • 11027
  • 587 / 112
  • Эта строка съедает место на вашем мониторе
*

klipius

  • Захожу иногда
  • 98
  • 2 / 0
Re: 100500-й вопрос по robots.txt
« Ответ #2 : 19.12.2018, 12:38:49 »
Стоит у меня этот плагин, толку ноль - https://yandex.ru/yandsearch?text=host%3Auplaptop.pro%20%7C%20host%3Awww.uplaptop.pro&lr=225
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Как лучше прописать robots.txt?

Автор web1

Ответов: 2
Просмотров: 157
Последний ответ 25.07.2021, 21:38:12
от web1
Правильный robots.txt? [вопросы/обсуждение]

Автор wishlight

Ответов: 445
Просмотров: 192176
Последний ответ 22.04.2021, 02:07:28
от bratsk12
Разные robots.txt

Автор yyyuuu

Ответов: 7
Просмотров: 295
Последний ответ 14.01.2021, 14:06:58
от rsn
Языки /en/ /ru/ проблема с входом в админку и редиректит на site.r/ru/robots.txt

Автор HolySong

Ответов: 0
Просмотров: 349
Последний ответ 10.07.2020, 13:12:46
от HolySong
Google Search Console, sitemap.xml и robots.txt

Автор Игарь

Ответов: 7
Просмотров: 541
Последний ответ 20.05.2020, 23:36:20
от Kostelano