0 Пользователей и 1 Гость просматривают эту тему.
  • 447 Ответов
  • 200759 Просмотров
*

dreamwind

  • Захожу иногда
  • 166
  • 27 / 13
Попробуйте адрес картинки посмотреть как Google Bot
https://www.google.com/webmasters/tools/googlebot-fetch
*

Kosshechka

  • Осваиваюсь на форуме
  • 38
  • 0 / 0
Оптимизируйте изображения с помощью графических редакторов, программок или онлайн оптимизаторов. Но это так - мелочи. Успешной работы над сайтом.

спасибо ! а какой оптимальный размер картинок ? я делаю ширину 400 пикселей, думала это нормально
*

ELLE

  • Глобальный модератор
  • 4510
  • 893 / 0
спасибо ! а какой оптимальный размер картинок ? я делаю ширину 400 пикселей, думала это нормально
http://joomclub.net/blog/verstka/78.html

К данной теме никак не относится!
*

aleksei

  • Осваиваюсь на форуме
  • 32
  • 0 / 0
Может кому-то интересно будет. У меня при проверки валидности карты сайта на Яндексе, вылетало "Указанный URL запрещен к индексированию в файле robots.txt"
Карта имела вид: http://сайт/index.php?option=com_xmap&sitemap=1&view=xml
Решил проблему путем удаления из robots.txt - Disallow: /index.php
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Ну и теперь дубли появятся
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

aleksei

  • Осваиваюсь на форуме
  • 32
  • 0 / 0
Ну тогда не знаю. Мне это показалось единственным правильным решением.
*

Lepiloff

  • Захожу иногда
  • 202
  • 1 / 0
Подскажите как открыть доступ к категории, но закрыть к вложенным страницам вида http://site.ru/kategoriya/page.html т.е. страницу http://site.ru/kategoriya/ открываем  а вложенный материал закрываем. 
*

borro

  • Завсегдатай
  • 1379
  • 22 / 0
  • желаю вам счастья
Подскажите как открыть доступ к категории, но закрыть к вложенным страницам вида http://site.ru/kategoriya/page.html т.е. страницу http://site.ru/kategoriya/ открываем  а вложенный материал закрываем. 
Здравствуйте. Попробуйте такие правила:
Код
Allow: /категория/$
Disallow: /категория/*
*

Lepiloff

  • Захожу иногда
  • 202
  • 1 / 0
СПасибо, попробую
*

Ingener

  • Давно я тут
  • 547
  • 10 / 5
Здравствуйте, установлена Simple Images Gallery Pro для создания галереи в К2

Созданные jpg миниатюры хранятся в  /media/k2/galleries/папка/ где папка - в каждой статье разная

Будет ли правильно приписать в роботсе для индексации картинок:

Allow: /media/k2/galleries/*.jpg

или все же правильно

Allow: /media/k2/galleries/папка/*.jpg

но как быть если папка - в каждой статье разное название?
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Allow: /media/k2/galleries/*.jpg - нормально, но проверяйте в инструментах Google и яндекса. Ведь несколько лет назад директивы Allow вообще не существовало.
Так то по вашей записи получается, что вы разрешаете индексировать все файлы в папке galleries и всех подпапках  с расширением .jpg
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

Sulpher

  • Живу я здесь
  • 2112
  • 401 / 16
  • Шаблоны и расширения Joomla
Вопрос: как быть с индексацией страниц, разбитых  при помощи Pagebreak?
ЧПУ у разбитых страниц такие:
/linkurl.html?showall=&start=1
/linkurl.html?showall=&start=2

Смущают правила:
Disallow: /*?
Disallow: /*&

Будет ли проиндексировано содержимое?
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Нет. Но скорее всего робот найдет "дырочку" и залезет в /linkurl.html
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

Vortas

  • Осваиваюсь на форуме
  • 29
  • 0 / 0
У моего сайта на Joomla 3.3.1 создана следующая структура mysite.ru/category/subcategory/material.html

После индексации сайта получилось три дубля одной и той же статьи:
mysite.ru/category.html
mysite.ru/category/subcategory.html
mysite.ru/category/subcategory/material.html

Подскажите пожалуйста какие нужно команды добавить в файл robots.txt для того чтобы убрать первые два дубля:
mysite.ru/category.html
mysite.ru/category/subcategory.html

Оставить нужно только эту страницу:
mysite.ru/category/subcategory/material.html
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
mysite.ru/category.html
mysite.ru/category/subcategory.html

Прям их и добавьте в запрет.
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

Vortas

  • Осваиваюсь на форуме
  • 29
  • 0 / 0
Прям их и добавьте в запрет.

Если я правильно понял, то нужно так написать:

Allow: /category/subcategory/*.html
Disallow: /category/subcategory/

И тогда первые два дубля закроются от индексации?
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Цитировать
mysite.ru/category.html
mysite.ru/category/subcategory.html

Эти не закроются вашим кодом.
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

Vortas

  • Осваиваюсь на форуме
  • 29
  • 0 / 0
Эти не закроются вашим кодом.

А если так?

Disallow: /category$
Disallow: /category/subcategory$
« Последнее редактирование: 30.06.2014, 22:50:09 от Vortas »
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

Vortas

  • Осваиваюсь на форуме
  • 29
  • 0 / 0
Тоже не закроются ))))

Хорошая, довольно понятная справка по роботс

Так закроются?

Disallow: /category
Disallow: /category/subcategory
Allow: /category/subcategory/material.html # Получается название каждого материала нужно разрешать отдельно или есть другой выход?
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Disallow: /category - закроет и следущую запись, вообще всё что начинаются с /category
Disallow: /category/subcategory - поэтому ее писать уже не надо.
Allow: /category/subcategory/  - разрешает все за пределами/category/subcategory/

И потом естественно проверить. Я по-старинке до сих пор мало верю Allow ...
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

Vortas

  • Осваиваюсь на форуме
  • 29
  • 0 / 0
Disallow: /category - закроет и следущую запись, вообще всё что начинаются с /category
Disallow: /category/subcategory - поэтому ее писать уже не надо.
Allow: /category/subcategory/  - разрешает все за пределами/category/subcategory/

И потом естественно проверить. Я по-старинке до сих пор мало верю Allow ...

А если в панели управления Joomla настроить индексацию таким образом:

В менеджере меню у пункта меню "category" установить мета-тэг Robots: No index, Follow
В менеджере категорий у категории "category" установить мета-тэг Robots: No index, Follow

В менеджере меню у подпункта меню "subcategory" установить мета-тэг Robots: No index, Follow
В менеджере категорий у подкатегории "subcategory" установить мета-тэг Robots: No index, Follow

В менеджере материалов у материала "material" установить мета-тэг Robots: Index, Follow

При таких настройках первые два дубля закроются?
Если в Joomla доступны эти настройки то зачем мучатся с хоботс.тхт
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Наверно замечено было, что роботы игнорируют данные правила ... я не знаю
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

Vortas

  • Осваиваюсь на форуме
  • 29
  • 0 / 0
Disallow: /category - закроет и следущую запись, вообще всё что начинаются с /category
Disallow: /category/subcategory - поэтому ее писать уже не надо.
Allow: /category/subcategory/  - разрешает все за пределами/category/subcategory/

И потом естественно проверить. Я по-старинке до сих пор мало верю Allow ...

А если я хочу чтобы страница:

mysite.ru/category.html - была доступна для индексации

mysite.ru/category/subcategory.html - была недоступна для индексации

mysite.ru/category/subcategory/material.html - была доступна для индексации

То правило будет такое?
Disallow: /category/subcategory
Allow: /category/subcategory/
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Да.

Но если вам надо скрыть 1 страницу, то достаточно только:
Disallow: mysite.ru/category/subcategory.html

10 постов назад я так и написал.
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

gorodok

  • Осваиваюсь на форуме
  • 40
  • 0 / 0
Помогите пожалуйста хостинг сайт заблокировал нагрузка 336%
нагрузку создавал поисковик http://corp.sputnik.ru/webmaster
мой robots.txt помогите настроить
Код
User-agent: *
Disallow: /*ru
Disallow: /*en
Disallow: /*city
Disallow: /*login
Disallow: /*register
Disallow: /*new
Disallow: /*search
Disallow: /*goto
Disallow: /*cpanel
Disallow: /*profile
Disallow: /*logout
Disallow: /*print
Disallow: /*vip
Disallow: /*note
Disallow: /*noteprint
Disallow: /*contacts
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Помогите пожалуйста хостинг сайт заблокировал нагрузка 336%
нагрузку создавал поисковик http://corp.sputnik.ru/webmaster
мой robots.txt помогите настроить

User-Agent: SputnikBot
Disallow: /

Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

Vortas

  • Осваиваюсь на форуме
  • 29
  • 0 / 0
Яндекс проиндексировал все метки из облака тэгов, в результате куча дублей
mysite.ru›component/tags/tag/tagname.html

Как правильно закрыть в robots.txt

Так правильно?
Disallow: /component

Или так?
Disallow: /*tag
*

Pazys

  • Завсегдатай
  • 1738
  • 241 / 4
  • <a>А где я ошибся-то?</b>
Ни то ни другое.
1 - вы закроете все компоненты
2 - вы закроете что-то в духе /oktagon

закройте конкретно тэги:
Disallow: component/tags
Ишак меня нюхал ...
Если помог - плюсуйте в карму.
*

Vortas

  • Осваиваюсь на форуме
  • 29
  • 0 / 0
Если я хочу чтобы сайт индексировали только роботы Яндекс и Google, то можно так указать:

User-Agent: Yandex, Google

или допускается только так:

User-Agent: Yandex

User-Agent: Google

И каждому роботу получается дублировать одни и теже директивы?
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Роботу Googlebot заблокирован доступ в файле robots.txt

Автор illimited

Ответов: 3
Просмотров: 1705
Последний ответ 29.05.2022, 14:57:55
от web1
Как сделать правильный редирект

Автор gadjet

Ответов: 25
Просмотров: 12368
Последний ответ 17.05.2022, 01:22:12
от kabban
Как лучше прописать robots.txt?

Автор web1

Ответов: 2
Просмотров: 640
Последний ответ 25.07.2021, 21:38:12
от web1
Разные robots.txt

Автор yyyuuu

Ответов: 7
Просмотров: 657
Последний ответ 14.01.2021, 14:06:58
от rsn
Языки /en/ /ru/ проблема с входом в админку и редиректит на site.r/ru/robots.txt

Автор HolySong

Ответов: 0
Просмотров: 665
Последний ответ 10.07.2020, 13:12:46
от HolySong