0 Пользователей и 1 Гость просматривают эту тему.
  • 3 Ответов
  • 740 Просмотров
*

Pavel_L

  • Осваиваюсь на форуме
  • 30
  • 0 / 0
Здравствуйте форумчане!

Вопрос по robots.txt и видимости сайта роботами.


Половина контента выводится через модуль 'HTML-код'

В robots.txt прописано:
Disallow: /modules/

Надо открыть эту папку для индексации контента поисковиками?

Думаю, ответ однозначен, что надо.
Только вопрос в том, где лежит контент из 'HTML-код', в какой папке?


Еще в роботе прописано:
Disallow: /components/

В этой папке лежит плагин shortcode, и контент на всех страницах выводится с его помощью, надо ли его тоже открыть поисковикам? Читал на просторах это поможет увидеть страницы поисковикам глазами юзеров..

Надо ли прописать:

Allow: /components/com_bdthemes_shortcodes ?



Еще вопрос
Сайт на gantry 5
components/com_gantry5
plugins/gantry5

Тоже закрыто dissalow

Не помешает ли это роботам видеть сайт "глазами пользователей" ?
*

draff

  • Гуру
  • 5479
  • 390 / 7
  • ищу работу
Только вопрос в том, где лежит контент из 'HTML-код', в какой папке?
В базе данных.
*

dmitry_stas

  • Легенда
  • 13152
  • 1232 / 8
на все 3 вопроса ответ - нет
Тут дарят бакс просто за регистрацию! Успей получить!
Все советы на форуме раздаю бесплатно, то есть даром. Индивидуально бесплатно консультирую только по вопросам стоимости индивидуальных консультаций
*

Pavel_L

  • Осваиваюсь на форуме
  • 30
  • 0 / 0
Спасибо  ^-^
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Как лучше прописать robots.txt?

Автор web1

Ответов: 2
Просмотров: 157
Последний ответ 25.07.2021, 21:38:12
от web1
Яндекс не индексирует вообще картинки с сайта

Автор Девушка с веслом

Ответов: 6
Просмотров: 243
Последний ответ 10.05.2021, 17:21:18
от xpank
Правильный robots.txt? [вопросы/обсуждение]

Автор wishlight

Ответов: 445
Просмотров: 192177
Последний ответ 22.04.2021, 02:07:28
от bratsk12
Сервис или программа для оценки позиций сайта

Автор dron

Ответов: 12
Просмотров: 2087
Последний ответ 12.03.2021, 18:02:22
от v42bis
Разные robots.txt

Автор yyyuuu

Ответов: 7
Просмотров: 295
Последний ответ 14.01.2021, 14:06:58
от rsn