Новости Joomla

0 Пользователей и 1 Гость просматривают эту тему.
  • 8 Ответов
  • 1722 Просмотров
*

art22

  • Захожу иногда
  • 328
  • 0 / 0
о запрете в Robot.txt
« : 23.10.2010, 20:18:56 »
Добрый вечер... у меня такой вопрос! стоит ли добавить index.php? в Robot.txt если включено  SEO , mod_rewrite  и суффикс к URL ??
 
срочно надо за ранее огромное спасибо *DRINK*
*

AlexSmirnov

  • Завсегдатай
  • 1862
  • 272 / 16
  • Ищите и найдете
Re: о запрете в Robot.txt
« Ответ #1 : 23.10.2010, 20:25:01 »
обычная практика на Джумловских сайтах - разрешать роботам и скроллерам вход только на /:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
# Back the fufalo (особенно ту самую столкершу)! #
# ВАЖНО! Кайфую от удаления присланного в личку спама, почти как от любви (особенно по выходным). #
*

art22

  • Захожу иногда
  • 328
  • 0 / 0
Re: о запрете в Robot.txt
« Ответ #2 : 23.10.2010, 20:34:11 »
а так не сайдет?
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /component
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /templates/
Disallow: /plugins/
Disallow: /tmp/
Disallow: /links/
Disallow: /xmlrpc/
Disallow: /*.pdf
Disallow: /*.doc
Disallow: /*print
Disallow: /index2
Disallow: /index.php?
Disallow: /denver.html
Disallow: /columbia-mono.html?FontSize=font-small


У меня включено включено  SEO , mod_rewrite
*

dynamit

  • Завсегдатай
  • 1744
  • 265 / 0
  • Winter Is Coming
Re: о запрете в Robot.txt
« Ответ #3 : 23.10.2010, 20:46:30 »
Disallow: /*.pdf
Disallow: /*.doc
Disallow: /*print
у вас эти файлы лежат в корне?
Цитировать
Disallow: /index2
Disallow: /index.php?
не хотите, что-бы индексировался сайт?
Цитировать
Disallow: /denver.html
Disallow: /columbia-mono.html?FontSize=font-small
а, что это?
почитайте, полезно  - Все о файле robots.txt по-русски
ТАМ ГДЕ ТЫ НИЧЕГО НЕ МОЖЕШЬ, ТЫ НЕ ДОЛЖЕН НИЧЕГО ХОТЕТЬ
==========================================================
Сайты на Joomla!. Верстка. Консультации.  ||  Яндекс уже не ищет, он уже продает (с)  ||    Создание шаблона для Joomla 2.5
*

art22

  • Захожу иногда
  • 328
  • 0 / 0
Re: о запрете в Robot.txt
« Ответ #4 : 23.10.2010, 22:38:54 »
нет вроде не лежат в корне...

на счет
Disallow: /index2
Disallow: /index.php?
я же включил mod_rewrite  он же убирает    "/index.php?" мне что удалить из робота   "/index.php?" ??



Disallow: /denver.html
Disallow: /columbia-mono.html?FontSize=font-small
 это страницы которые не работают(
*

leko

  • Захожу иногда
  • 114
  • 4 / 0
Re: о запрете в Robot.txt
« Ответ #5 : 03.11.2010, 03:25:30 »
Так что, индексируется сайт с добавкой:

Disallow: /index2
Disallow: /index.php?

? :)
*

SmokerMan

  • Гуру
  • 5293
  • 720 / 26
Re: о запрете в Robot.txt
« Ответ #6 : 03.11.2010, 08:36:52 »
Так что, индексируется сайт с добавкой:
при включенном mod_rewrite должен индексироваться.
*

leko

  • Захожу иногда
  • 114
  • 4 / 0
Re: о запрете в Robot.txt
« Ответ #7 : 03.11.2010, 09:11:48 »
Спасибо за ответ.

А вот так не лучше?

Disallow: /index.php?*
*

art22

  • Захожу иногда
  • 328
  • 0 / 0
Re: о запрете в Robot.txt
« Ответ #8 : 04.11.2010, 11:45:53 »
а я когда ставил

Disallow: /index2
Disallow: /index.php?

у меня в Яндекс вебмастере все что начинался с index.php? был блокирован роботом... так добавить index.php? в робот или нет?
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Как запретить к индексации в robot.txt?

Автор kirill-juk

Ответов: 3
Просмотров: 1339
Последний ответ 07.02.2023, 13:53:30
от Ратник
Сбит с толку! Visitor anti-robot validation

Автор Aiden

Ответов: 7
Просмотров: 2986
Последний ответ 20.01.2015, 11:01:57
от Aiden
в robot.txt создаётся деректива Request-rate : 1/10

Автор lotosss

Ответов: 4
Просмотров: 3770
Последний ответ 18.03.2011, 11:51:06
от lotosss
Как избавится от дублей страниц с помощью robot.txt

Автор abcshka

Ответов: 2
Просмотров: 1707
Последний ответ 17.01.2011, 18:49:43
от AlexSF