0 Пользователей и 1 Гость просматривают эту тему.
  • 6 Ответов
  • 2851 Просмотров
*

Akksimo

  • Захожу иногда
  • 215
  • 1 / 0
  • Без выходных
robots.txt Disallow: /component/*
« : 10.01.2011, 08:17:43 »
Подскажите нужно ли писать в robots.txt Disallow: /component/*
ведь там уже есть  Disallow: /components/
Но я заметил что страницы с линками на component часто присутствую и среди них такие ненужные как логин и авторизация
и если ну жно писать Disallow: /component/* обьясните плз что именно он закроет и что значит такая формулировка Disallow: /component/*
*

pavelm

  • Захожу иногда
  • 58
  • 0 / 0
Re: robots.txt Disallow: /component/*
« Ответ #1 : 13.01.2011, 12:39:11 »
component и components - две разные папки!
*

Pinin

  • Захожу иногда
  • 59
  • 3 / 0
Re: robots.txt Disallow: /component/*
« Ответ #2 : 22.02.2011, 07:16:21 »
Вот какая тема интересная возникла: если я закрою, допустим одним из дизаловов профили пользователей - понятно, что индексации их роботом не будет. НО, если кто-то (имеется в виду человек) - зайдет в один из профилей и скормит вручную адрес этой страницы адурилке ПС, ссылки в этом профиле проиндексируются?

Смысл вопроса вот в чем - на форумах частенько регистрируются темные личности с одной лишь похоже целью: наращивание чьей-то ссылочной массы. Выходов два - либо закрывать профили тегами <noindex> / rel="nofollow", либо через сабж. И у меня есть сильное подозрение, что второй вариант ущербен...
*

Webb

  • Захожу иногда
  • 304
  • 19 / 2
  • rusinmd
Re: robots.txt Disallow: /component/*
« Ответ #3 : 22.02.2011, 19:47:20 »
Вот какая тема интересная возникла: если я закрою, допустим одним из дизаловов профили пользователей - понятно, что индексации их роботом не будет. НО, если кто-то (имеется в виду человек) - зайдет в один из профилей и скормит вручную адрес этой страницы адурилке ПС, ссылки в этом профиле проиндексируются?
-нет

Смысл вопроса вот в чем - на форумах частенько регистрируются темные личности с одной лишь похоже целью: наращивание чьей-то ссылочной массы. Выходов два - либо закрывать профили тегами <noindex> / rel="nofollow", либо через сабж. И у меня есть сильное подозрение, что второй вариант ущербен...
-по моему мнению роботс удобней и не чуть для ПС не ущербный, для этого он и придуман
*

Pinin

  • Захожу иногда
  • 59
  • 3 / 0
Re: robots.txt Disallow: /component/*
« Ответ #4 : 22.02.2011, 20:02:25 »
Да я не про ущербность роботса для ПС, понятно, что он закроет то, что должен. Я про то, что в отличии от тегов, его ограничения можно обойти описанным способом (скормить вручную ссылку с закрытой для роботов страницы в аддурилку ПС). Или все же так не прокатит?
*

Webb

  • Захожу иногда
  • 304
  • 19 / 2
  • rusinmd
Re: robots.txt Disallow: /component/*
« Ответ #5 : 22.02.2011, 20:09:56 »
не прокатит, я писал но выделилось как цитата, Пс в первую очередь обращается к роботсу, есть ли запреты. а что кто то кому то скормил пофиг, при обращении к сайту каждый раз идёт анализ роботса.
*

Pinin

  • Захожу иногда
  • 59
  • 3 / 0
Re: robots.txt Disallow: /component/*
« Ответ #6 : 22.02.2011, 20:44:00 »
Ну, тогда порядок. Значит, я был не прав (странно, но это радует).
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Роботу Googlebot заблокирован доступ в файле robots.txt

Автор illimited

Ответов: 3
Просмотров: 2740
Последний ответ 29.05.2022, 14:57:55
от web1
Правильный robots.txt? [вопросы/обсуждение]

Автор wishlight

Ответов: 447
Просмотров: 203033
Последний ответ 20.11.2021, 16:53:49
от Byzi
Как лучше прописать robots.txt?

Автор web1

Ответов: 2
Просмотров: 796
Последний ответ 25.07.2021, 21:38:12
от web1
Разные robots.txt

Автор yyyuuu

Ответов: 7
Просмотров: 819
Последний ответ 14.01.2021, 14:06:58
от rsn
Языки /en/ /ru/ проблема с входом в админку и редиректит на site.r/ru/robots.txt

Автор HolySong

Ответов: 0
Просмотров: 781
Последний ответ 10.07.2020, 13:12:46
от HolySong