0 Пользователей и 1 Гость просматривают эту тему.
  • 7 Ответов
  • 837 Просмотров
*

glebka

  • Осваиваюсь на форуме
  • 28
  • 0 / 0
Поисковики негативно не отреагируют если я в robots.txt пропишу папки для Wordpressа или битрикса или что-то левое? :o :D :D
Делаю, для того, чтобы любопытные запутались)) ;D
*

flyingspook

  • Живу я здесь
  • 3590
  • 247 / 9
Нет, главное что бы у вас таких же не было и в дальнейшем не появилось, а то индексацию себе закроете.
*

glebka

  • Осваиваюсь на форуме
  • 28
  • 0 / 0
таких же не было

в смысле?
*

flyingspook

  • Живу я здесь
  • 3590
  • 247 / 9
в смысле?
Папок на сайте, нет и не появится которые вы в роботс запретить хотите.
*

glebka

  • Осваиваюсь на форуме
  • 28
  • 0 / 0
В общем сделал такой robots.txt

User-agent: *
Disallow: /wp-admin
Disallow: /administrator/
Disallow: /bitrix/
Disallow: /bitrix/admin
Disallow: /upload/
Disallow: /search/
Disallow: /cache/
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /cli/
Disallow: /includes/
Disallow: /wp-content/themes
Disallow: /components/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/

А то, что я создал папки админки Wordpressа и битрикса пустые (с index.html) и запаролил их в .htaccess ничего страшного для поисковика??
*

flyingspook

  • Живу я здесь
  • 3590
  • 247 / 9
А зачем их создавать, если не секрет расскажите? Хватит просто запрета на индексацию прописать.
*

glebka

  • Осваиваюсь на форуме
  • 28
  • 0 / 0
дело житейское, к вопросам продвижения или же защиты сайта оно не относится.
была дискуссия какая cms у меня, тех кто проверяет что за cms у меня фаервол банит их, ну я и ржу с них)) странно, но пока никто не просёк Joomla :laugh:

а про robots.txt, логи почему то большие пошли по этим папкам после того как в нём их прописал, ну вот и всё)
*

flyingspook

  • Живу я здесь
  • 3590
  • 247 / 9
а про robots.txt, логи почему то большие пошли по этим папкам после того как в нём их прописал, ну вот и всё)
Так сами и указали пути к не существующим путям.
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Роботу Googlebot заблокирован доступ в файле robots.txt

Автор illimited

Ответов: 3
Просмотров: 1705
Последний ответ 29.05.2022, 14:57:55
от web1
Правильный robots.txt? [вопросы/обсуждение]

Автор wishlight

Ответов: 447
Просмотров: 200760
Последний ответ 20.11.2021, 16:53:49
от Byzi
Как лучше прописать robots.txt?

Автор web1

Ответов: 2
Просмотров: 640
Последний ответ 25.07.2021, 21:38:12
от web1
Разные robots.txt

Автор yyyuuu

Ответов: 7
Просмотров: 657
Последний ответ 14.01.2021, 14:06:58
от rsn
Языки /en/ /ru/ проблема с входом в админку и редиректит на site.r/ru/robots.txt

Автор HolySong

Ответов: 0
Просмотров: 665
Последний ответ 10.07.2020, 13:12:46
от HolySong