Новости Joomla

Вышли релизы Joomla 5.1.0 и Joomla 4.4.4

Проблема с id в URL материалов Joomla при обновлении большого старого сайта до Joomla 5

В старых версиях Joomla URL адрес формировался по схеме [id материала + алиас материала]. Например, 145-my-article-alias. Однако. старый роутер Joomla был не идеален и плодил дубли страниц, с чем усиленно боролись СЕО специалисты с помощью различных плагинов и хаков ядра CMS.

Используем поля Joomla для фильтрации материалов

Перевод статьи одного из разработчиков ядра Joomla Брайана Тимэна (Brian Teeman).

1 ... 4 5 6 7 8 ... 15   Вниз
0 Пользователей и 1 Гость просматривают эту тему.
  • 447 Ответов
  • 200899 Просмотров
*

tefun

  • Живу я здесь
  • 2540
  • 130 / 1
  • Легче всего обмануть себя
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #150 : 07.04.2013, 12:05:35 »
2 ELLE
Оч важный вопрос, дело в том, что есть на сайте окло 80 дублей, которые надо убрать, вот думаю прописать запрет вручную в роботсе, или на каждый редирект делать. Дело в том, что читал статью о роботс, где написано, что лучше его не пихать много (на robots.org вроде)
Для поисковиков кол-во запретов критично? У него хватит время обойти сайт, или он просто уйдет (((
Записан
то что постится на фОруме, не вырубается тапОрами
_______________________________________________
Мысли и женщины вместе не приходят М.Ж.
*

ELLE

  • Глобальный модератор
  • 4510
  • 893 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #151 : 07.04.2013, 14:24:01 »
лучше на каждый редирект
Записан
*

tefun

  • Живу я здесь
  • 2540
  • 130 / 1
  • Легче всего обмануть себя
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #152 : 07.04.2013, 23:31:58 »
Цитата: ELLE от 07.04.2013, 14:24:01
лучше на каждый редирект
Ок,
тоже так думал сделать, но потом испугался, что поисковик может подумать, а не много ли редиректов на сайте))) Спасибо за совет, буду пробывать
Записан
то что постится на фОруме, не вырубается тапОрами
_______________________________________________
Мысли и женщины вместе не приходят М.Ж.
*

user

  • Захожу иногда
  • 112
  • 1 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #153 : 10.04.2013, 19:52:25 »
Хочу закрыть индексацию для всех ПС кроме Яндекс, Рамблет, майлру и Google. Правильный ли robots в таком случае?

Спойлер
[свернуть]

Сайт маленький, всего 7 страниц + страницы регистрации, восстановления пароля/логина и профиль. Статей как таковых нет.
Записан
*

tefun

  • Живу я здесь
  • 2540
  • 130 / 1
  • Легче всего обмануть себя
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #154 : 12.04.2013, 18:19:20 »
Кстати, спасибо за идею,
я вот кумекую над этим, а что мне потом будет, если я закрою сайт от всех остальных? Какие "санкции" мне грозят?
Я щас хочу оставить только для Google, Яндекс, апорта, майл и рамблера, а все остальное
User-agent: *
Disallow: /
Записан
то что постится на фОруме, не вырубается тапОрами
_______________________________________________
Мысли и женщины вместе не приходят М.Ж.
*

user

  • Захожу иногда
  • 112
  • 1 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #155 : 13.04.2013, 15:17:34 »
А с чего вдруг санкции, с чьей стороны?
Так правильный файл выше или нет, кто разбирается, я на глаз сделал?
Записан
*

tefun

  • Живу я здесь
  • 2540
  • 130 / 1
  • Легче всего обмануть себя
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #156 : 13.04.2013, 16:13:38 »
Цитата: user от 13.04.2013, 15:17:34
А с чего вдруг санкции, с чьей стороны?
Так правильный файл выше или нет, кто разбирается, я на глаз сделал?
лучше сначала поставить
User-agent: Yandex
а потом Google, рамблер, майл а потом уже для всех. Сначала ставят тех кто приоритетней
а где ?
Host: сайт.ру

Sitemap: http://сайт.ру/index.php?option=com_xmap&view=xml&tmpl=component&id=1
Записан
то что постится на фОруме, не вырубается тапОрами
_______________________________________________
Мысли и женщины вместе не приходят М.Ж.
*

tefun

  • Живу я здесь
  • 2540
  • 130 / 1
  • Легче всего обмануть себя
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #157 : 13.04.2013, 16:15:32 »
Цитата: user от 13.04.2013, 15:17:34
А с чего вдруг санкции, с чьей стороны?
ну а вдруг, почему то я такого совета за последнее время не слышал, чтобы скрыть от всех...да и не видел ни у кого. Все неизвестное пугает, поэтому и боюся)))
Записан
то что постится на фОруме, не вырубается тапОрами
_______________________________________________
Мысли и женщины вместе не приходят М.Ж.
*

tefun

  • Живу я здесь
  • 2540
  • 130 / 1
  • Легче всего обмануть себя
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #158 : 17.04.2013, 22:23:34 »
Доброй ночи,
появился вопрос,
у меня закрыта директория images, вот думаю теперь открыть ее, но там много изображений. просто поисковик не ищет по картинкам, думаю сделать, чтобы искал.
Хочу сделать Allow папки images.  В папке много много изображений, у многих прописаны альты
Хочу сделать Allow папке с excel-файлом (прайс-лист) там более 5 000 наименований
Роботу это не понравится? Чем черевато?
Записан
то что постится на фОруме, не вырубается тапОрами
_______________________________________________
Мысли и женщины вместе не приходят М.Ж.
*

stanislav-1983

  • Новичок
  • 9
  • 0 / 0
  • Админ еб:::тся когда у него все упало..
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #159 : 18.04.2013, 19:10:41 »
Всем наидобрейшего времени суток!
Прошу вынести вердикт по моему роботсу
стоит Joomla 1.5.26+k2 2.5
Спойлер
[свернуть]
Записан
*

ELLE

  • Глобальный модератор
  • 4510
  • 893 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #160 : 18.04.2013, 19:11:48 »
классный роботс. только сайта такого не существует, печалька
Записан
*

stanislav-1983

  • Новичок
  • 9
  • 0 / 0
  • Админ еб:::тся когда у него все упало..
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #161 : 18.04.2013, 19:17:48 »
Цитата: ELLE от 18.04.2013, 19:11:48
классный роботс. только сайта такого не существует, печалька
приятно получить такой отзыв,но прям так классный? даже и добавить (убрать) нечего? сайт в сети, пока слегка корявенько смотрится, вот и поменял URL
« Последнее редактирование: 18.04.2013, 19:37:06 от stanislav-1983 »
Записан
*

Joury

  • Захожу иногда
  • 164
  • 2 / 0
  • vs-aqua.ru - изготовление аквариумов на заказ
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #162 : 18.04.2013, 22:01:48 »
А вот у меня такой вопрос, он чисто больше литорический.
Опиши ситуацию, у меня есть интернет-магазин, на некоторых страницах размещена ссылка на прайс листы в xls форматах,
Но вот ведь незадача, подлый Яндекс почему то индексирует страницу только как прайс, а саму страницу не индексит.
Как вообще делают правильно? Просто закрыть в роботсе xls формат, или всё же оставить и как то доработать?
Записан
*

Dimit1

  • Осваиваюсь на форуме
  • 37
  • 0 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #163 : 19.04.2013, 16:16:51 »
Друзья, возник такой вопрос:
Насколько плохо оставить открытыми ссылки со знаками "&" и "?", каковы отрицательные последствия будут? А то у меня в AdsManager, в результатах поиска такие ссылки...
На Joomla 1,7 стоят AdsManager, jcomments, пожалуй всё.
Спасибо!
« Последнее редактирование: 19.04.2013, 16:34:32 от Dimit1 »
Записан
*

yrygvay

  • Завсегдатай
  • 1293
  • 36 / 3
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #164 : 20.04.2013, 14:36:19 »
День добрый.
Решил отказаться  VM 2 от стороннего SEO.
Подскажите правильный robots.txt а то уж очень много мусора в поисковики выдаётся!
Записан
Смотрю....
*

dvd-obzor

  • Осваиваюсь на форуме
  • 28
  • 0 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #165 : 21.04.2013, 03:25:48 »
Стоит разбивать файл на робота для Яндекс и для всех остальных поисковиков?
Кто то говорит что надо, а кто то что не надо.
Записан
*

Rex_One

  • Захожу иногда
  • 453
  • 37 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #166 : 21.04.2013, 03:54:18 »
Цитата: dvd-obzor от 21.04.2013, 03:25:48
Стоит разбивать файл на робота для Яндекс и для всех остальных поисковиков?
Кто то говорит что надо, а кто то что не надо.

Пользуйтесь поиском, уже написано/описано.
http://joomlaforum.ru/index.php/topic,193446.0.html

Записан
Кривизна рук не компенсирует прямизну извилин.
*

klara7

  • Захожу иногда
  • 311
  • 4 / 1
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #167 : 24.04.2013, 17:00:32 »
Подскажите, пож-та. У меня такая проблема - Яндекс карту сайта принял на ура, Google не хочет (пишет количество ссылок 400, ошибок нет - а карту не принимает, пишет 0). Как только не колдовала, ничего. У меня в htaccess стоит RewriteRule ^sitemap.xml$ index.php?option=com_xmap&sitemap=1&view=xml

Думаю может ему sitemap.xml не нравится, пишу в robots.txt:
Спойлер
[свернуть]

Он пишет "При попытке доступа к вашему файлу Sitemap произошла ошибка. Убедитесь, что этот файл Sitemap соответствует нашим правилам и находится в указанном местоположении, а затем отправьте его повторно." Но я же указала в Allow. Или же этого не достаточно?
Заранее спасибо!
Записан
*

santala

  • Новичок
  • 1
  • 0 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #168 : 30.04.2013, 03:39:16 »
Цитата: stanislav-1983 от 18.04.2013, 19:10:41
Всем наидобрейшего времени суток!
Прошу вынести вердикт по моему роботсу
стоит Joomla 1.5.26+k2 2.5
Спойлер
[свернуть]


А разве вы не запретили индексацию sitemap? Тогда уж надо отдельно прописать Allow: для sitemap
Записан
*

bandanu

  • Захожу иногда
  • 162
  • 3 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #169 : 02.05.2013, 01:05:08 »
Скажите если сайт на к2 , все картинки в папке images то достаточно не писать Disallow: /images/ , чтобы картинки участвовали в индексации или добавить строку как у товарища stanislav-1983  Allow: /media/k2/items/cache/*.jpg 
Записан
*

ELLE

  • Глобальный модератор
  • 4510
  • 893 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #170 : 02.05.2013, 03:13:19 »
смотрим путь до картинки, идем в вебмастер раздел про индексацию и проверку роботс
далее вбиваем URL своей картинки в поле -
Спойлер
[свернуть]
жмем "проверить" и смотрим результат ниже
и такие вопросы пропадут навсегда!
Записан
*

user

  • Захожу иногда
  • 112
  • 1 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #171 : 12.05.2013, 20:07:44 »
Переписал файл, кто, что скажет?
Индексация закрыта для всех кроме Яндекс, Рамблер, майл и Google.

Спойлер
[свернуть]
« Последнее редактирование: 13.05.2013, 11:34:12 от user »
Записан
*

yrygvay

  • Завсегдатай
  • 1293
  • 36 / 3
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #172 : 15.05.2013, 09:58:34 »
День добрый.
 Сайт начал индексироваться яндексом:
Код
# If the Joomla site is installed within a folder such as at
# e.g. www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. www.example.com/robots.txt
# AND the Joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/orig.html
#
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html

User-agent: *
Allow: /index.php?option=com_xmap&sitemap=1&view=xml
Allow: /images/stories/virtuemart/category      
Allow: /images/stories/virtuemart/product
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /cli/
Disallow: /includes/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /*com_mailto
Disallow: /*pop=
Disallow: /*lang=ru	
Disallow: /*format=
Disallow: /*print=
Disallow: /*task=vote
Disallow: /*=watermark
Disallow: /*=download
Disallow: /*user/
Disallow: /404
Disallow: /index.php?
Disallow: /index.html
Disallow: /*?
Disallow: /*%
Disallow: /*&
Disallow: /index2.php
Disallow: /index.php
Disallow: /*tag	
Disallow: /*.pdf
Disallow: /*.swf
Disallow: /*print=1
Disallow: /*=atom
Disallow: /*=rss
Disallow: /shop/ask/
Disallow: /*keyword= 
Disallow: /*pop=0
Disallow: /*product-search
Disallow: /*flypage=
Disallow: /*cart
Host: .ru
 
Sitemap: http://.ru/sitemap.xml


User-agent: Yandex
Allow: /index.php?option=com_xmap&sitemap=1&view=xml
Allow: /images/stories/virtuemart/category      
Allow: /images/stories/virtuemart/product
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /cli/
Disallow: /includes/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /*com_mailto
Disallow: /*pop=
Disallow: /*lang=ru	
Disallow: /*format=
Disallow: /*print=
Disallow: /*task=vote
Disallow: /*=watermark
Disallow: /*=download
Disallow: /*user/
Disallow: /404
Disallow: /index.php?
Disallow: /index.html
Disallow: /*?
Disallow: /*%
Disallow: /*&
Disallow: /index2.php
Disallow: /index.php
Disallow: /*tag	
Disallow: /*.pdf
Disallow: /*.swf
Disallow: /*print=1
Disallow: /*=atom
Disallow: /*=rss
Disallow: /shop/ask/
Disallow: /*keyword= 
Disallow: /*pop=0
Disallow: /*product-search
Disallow: /*flypage=
Disallow: /*cart

 
Sitemap: http://.ru/sitemap.xml

Вот с таким роботс.

Но в Яндекс вебмастере в структуре сайта выявилось :
component/ - search/ - Itemid=684& - limit=int&
вот такая подчинённая структура.

Можно её закрыть от индексации ? не будет это вредно?!
Записан
Смотрю....
*

Dorotar

  • Захожу иногда
  • 69
  • 1 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #173 : 19.05.2013, 19:37:40 »
Коротко вопрос:
Есть 15 категорий к2 и блог этих категорий, что запретить индексировать чтобы не было дублей - категории или блог категорий
mysite/index.php/lyubov - одна из категорий
mysite/index.php/stati - блог всех категорий.

И нужно ли запрещать вообще?
Записан
*

tefun

  • Живу я здесь
  • 2540
  • 130 / 1
  • Легче всего обмануть себя
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #174 : 19.05.2013, 19:40:07 »
Цитата: Dorotar от 19.05.2013, 19:37:40
Коротко вопрос:
Есть 15 категорий к2 и блог этих категорий, что запретить индексировать чтобы не было дублей - категории или блог категорий
mysite/index.php/lyubov - одна из категорий
mysite/index.php/stati - блог всех категорий.

И нужно ли запрещать вообще?
а какие у вас дубли?
приведите пример,
у вас url с index.php стоит, может стоит его убрать, а потом запретить все странички с index.php
Записан
то что постится на фОруме, не вырубается тапОрами
_______________________________________________
Мысли и женщины вместе не приходят М.Ж.
*

user

  • Захожу иногда
  • 112
  • 1 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #175 : 20.05.2013, 17:33:25 »
Нужно ли запрещать индексацию файлов в корне сайта: index.php, web.config.txt, Joomla.xml, файлы от удаленных антивирусов (norton) и вебмастера Яндекс?
Записан
*

tefun

  • Живу я здесь
  • 2540
  • 130 / 1
  • Легче всего обмануть себя
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #176 : 21.05.2013, 19:46:26 »
Цитата: user от 20.05.2013, 17:33:25
Нужно ли запрещать индексацию файлов в корне сайта: index.php, web.config.txt, Joomla.xml, файлы от удаленных антивирусов (norton) и вебмастера Яндекс?
нет, какой смысл. Ведь они находятся в одной и той же папке что и вашсайт.ру
Записан
то что постится на фОруме, не вырубается тапОрами
_______________________________________________
Мысли и женщины вместе не приходят М.Ж.
*

kik84

  • Завсегдатай
  • 1350
  • 64 / 4
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #177 : 23.05.2013, 20:41:09 »
Подскажите, если имеются ссылки, содержащие знак #
Закрыть их возможно строкой Disallow: /*#
Записан
*

user

  • Захожу иногда
  • 112
  • 1 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #178 : 24.05.2013, 09:55:07 »
Такой вопрос. На сайте имеется всего 10 страницы, включен стандартный SEF. Нужно проиндексировать только 4 страницы, доступные по адресам вида
site.ru
site.ru/index.php/page1
site.ru/index.php/page2
site.ru/index.php/page3

Как запретить индексацию всего сайта кроме этих страниц?
Записан
*

ELLE

  • Глобальный модератор
  • 4510
  • 893 / 0
Re: Правильный robots.txt? [вопросы/обсуждение]
« Ответ #179 : 24.05.2013, 15:43:03 »
kik84, user, FAQ в разделе прикреплен
Записан
1 ... 4 5 6 7 8 ... 15   Вверх
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Роботу Googlebot заблокирован доступ в файле robots.txt

Автор illimited

 Ответов: 3
Просмотров: 1777 		Последний ответ 29.05.2022, 14:57:55
от web1
Как сделать правильный редирект

Автор gadjet

 Ответов: 25
Просмотров: 12378 		Последний ответ 17.05.2022, 01:22:12
от kabban
Как лучше прописать robots.txt?

Автор web1

 Ответов: 2
Просмотров: 649 		Последний ответ 25.07.2021, 21:38:12
от web1
Разные robots.txt

Автор yyyuuu

 Ответов: 7
Просмотров: 665 		Последний ответ 14.01.2021, 14:06:58
от rsn
Языки /en/ /ru/ проблема с входом в админку и редиректит на site.r/ru/robots.txt

Автор HolySong

 Ответов: 0
Просмотров: 670 		Последний ответ 10.07.2020, 13:12:46
от HolySong