Форум русской поддержки Joomla!® CMS
06.12.2016, 20:06:49 *
Добро пожаловать, Гость. Пожалуйста, войдите или зарегистрируйтесь.
Вам не пришло письмо с кодом активации?

Войти
   
   Начало   Поиск Joomla 3.0 FAQ Joomla 2.5 FAQ Joomla 1.5 FAQ Правила форума Новости Joomla Реклама Войти Регистрация Помощь  
Страниц: [1] 2 3 4 5 6 7   Вниз
  Добавить закладку  |  Печать  
Автор

Настройки .htaccess и robots.txt для JoomShopping

 (Прочитано 40315 раз)
0 Пользователей и 1 Гость смотрят эту тему.
Jlekapb
Новичок
*

Репутация: +1/-0
Offline Offline

Сообщений: 2

Dom!No ^)


« : 09.03.2012, 13:29:14 »

Не нашел такой темы в категории joomshopping
Так как недавно начал работать с этим интернет магазином. Первый же проиндексированный сайт (15 товаров) дал 120 ссылок
При этом в роботс не закрывал никаких ссылок.
Дорогие пользователи. Не могли бы вы поделиться правильным robots.txt для JoomShopping, чтобы в индекс попадали только ЧПУ ссылки на товар.
« Последнее редактирование: 09.03.2012, 16:33:30 от nevigen » Записан
 
ELLE
Support Team
*****

Репутация: +862/-0
Offline Offline

Пол: Женский
Сообщений: 4723



« Ответ #1 : 09.03.2012, 13:30:38 »

сайт покажите, помогу вам составить роботс..
--------------------
т.к. у вас только кириллические адреса и домен рф...
пока только -
Disallow: /component/
перепишите так-
Disallow: /*component
Корзину можно так закрыть -
Disallow: /*cart

и сайт.рф/ссылки тоже стоит закрыть от индексации

Дополню для всех:
чтобы картинки индексировались необходимо прописать
Allow: /components/com_jshopping/files/img_categories/  # разрешаем индексировать картинки категорий
Allow: /components/com_jshopping/files/img_products/     # разрешаем индексировать фото товаров
« Последнее редактирование: 09.03.2012, 15:17:59 от nevigen » Записан
Jlekapb
Новичок
*

Репутация: +1/-0
Offline Offline

Сообщений: 2

Dom!No ^)


« Ответ #2 : 09.03.2012, 13:50:24 »

Спасибо. Непременно добавлю эти строчки в robots.txt
Записан
nevigen
Moderator
*****

Репутация: +734/-16
Offline Offline

Пол: Мужской
Сообщений: 8807


http://n*****n.com


« Ответ #3 : 09.03.2012, 15:16:51 »

А давайте сосотавим общий нормальній список под робот.тхт чтобі не возвращаться к этому вопросу ?
Я добавлю в FAQ и все..
Маестро в этом достаточно понимающий, как СЕОнист Wink
Кстати если что по ХТАКСЕСУ тоже стоило бы сделать правильную выкладку настроек Wink
« Последнее редактирование: 09.03.2012, 15:51:26 от nevigen » Записан
Majestro
Осваиваюсь на форуме
***

Репутация: +29/-8
Offline Offline

Пол: Мужской
Сообщений: 185


« Ответ #4 : 09.03.2012, 15:41:37 »

Маестро в это достаточно понимающий, как СЕОнист Wink

СЕОшнег Wink Так благозвучнее

Если что-то забыл - поправьте. Буду дописывать...

Код:
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Аllow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /*user
Disallow: /component
Disallow: /*product
Disallow: /*category
Disallow: /*cart
Disallow: /*search
Disallow: /*wishlist
Disallow: /*?tmpl
Allow: /components/com_jshopping/files/img_products/
Allow: /components/com_jshopping/files/img_categories/
Host: domain.ru
Sitemap: sitemap_url

Подходит для тех, кто правильно настроил ссылки!
Поправьте у себя Host и Sitemap
« Последнее редактирование: 09.03.2012, 18:45:49 от Majestro » Записан
Majestro
Осваиваюсь на форуме
***

Репутация: +29/-8
Offline Offline

Пол: Мужской
Сообщений: 185


« Ответ #5 : 09.03.2012, 16:27:04 »

Поправка на ветер!

Ваш сайт должен быть доступен только по одному адресу: ИЛИ с www ИЛИ без www - выбор за вами. Со второго адреса нужно настраивать 301 редирект на основной домен, который указан в директиве Host в robots.txt

На счет .htaccess - файл настраивается индивидуально.

В нем можно прописать следующее

Код:
Options -Indexes
запрет листинга каталогов

Цитировать
RewriteEngine On

RewriteCond %{HTTP_HOST} ^www\.zlatomania\.ru$ [NC]
RewriteRule ^(.*)$ http://zlatomania.ru%{REQUEST_URI} [L,R=301]
301 редирект на "без www"

Остальное настраивается индивидуально.
Записан
nevigen
Moderator
*****

Репутация: +734/-16
Offline Offline

Пол: Мужской
Сообщений: 8807


http://n*****n.com


« Ответ #6 : 09.03.2012, 16:39:21 »

Спасибо !
Добавил в FAQ.
Записан
ELLE
Support Team
*****

Репутация: +862/-0
Offline Offline

Пол: Женский
Сообщений: 4723



« Ответ #7 : 09.03.2012, 16:50:22 »

Disallow: /installation/
- это можно удалить

Disallow: /images/
- это закроет картинки в Joomla

Цитировать
Disallow: /cart/
Disallow: /search/
Disallow: /wishlist/
спорный момент - в корне нет таких директорий  и работать не будет, стоит указать по другому..
« Последнее редактирование: 09.03.2012, 18:03:04 от ELLE » Записан
danik.html
Практически профи
*******

Репутация: +351/-4
Offline Offline

Пол: Мужской
Сообщений: 2723



« Ответ #8 : 09.03.2012, 16:56:25 »

В нем можно прописать следующее

Код:
Options -Indexes
запрет листинга каталогов
Лишнее. В Joomla листинг глушится двумя с чемто тысячами файлов index.html в каждой папке Azn


Цитировать
Disallow: /libraries/
Disallow: /logs/
Объясните пожалуйста мне, откуда поисковики находят такие пути, ониж на сайте не встречаются нигде. Че, перебором чели? И не как не погибает сервер от тьмы запросов?
Записан
Majestro
Осваиваюсь на форуме
***

Репутация: +29/-8
Offline Offline

Пол: Мужской
Сообщений: 185


« Ответ #9 : 09.03.2012, 17:16:34 »

Я показал полный файл, с папками от Joomla.
Кстати, ошибка у меня Sad Я забыл про пагинацию в каталогах - там есть вопрос. Следовательно Disallow: /*? - ошибка.

Заменим на /*?tmpl - это печать карточки товара
Записан
Majestro
Осваиваюсь на форуме
***

Репутация: +29/-8
Offline Offline

Пол: Мужской
Сообщений: 185


« Ответ #10 : 09.03.2012, 17:20:59 »

Лишнее. В Joomla листинг глушится двумя с чемто тысячами файлов index.html в каждой папке Azn

Не лишнее. В ДжумШопе глушилок нет. Смотрите на свои файлы вашдомен/components/com_jshopping/controllers/

Объясните пожалуйста мне, откуда поисковики находят такие пути, ониж на сайте не встречаются нигде. Че, перебором чели? И не как не погибает сервер от тьмы запросов?

Пути могут быть и на других сайтах, которые ссылаются на Ваш. Из вредности...
Записан
danik.html
Практически профи
*******

Репутация: +351/-4
Offline Offline

Пол: Мужской
Сообщений: 2723



« Ответ #11 : 09.03.2012, 17:59:51 »

Не лишнее. В ДжумШопе глушилок нет. Смотрите на свои файлы вашдомен/components/com_jshopping/controllers/
Ага, точно, они решили забить Azn Хотя на JED'е вроде как это обязательное требование.
Пути могут быть и на других сайтах, которые ссылаются на Ваш. Из вредности...
Угу, а чет даже в голову не пришло. Хотя если кто захочет навредить, то понаделает таких ссылок, что будешь месяц составлять роботс чтоб учесть все нюансы ))
Записан
Majestro
Осваиваюсь на форуме
***

Репутация: +29/-8
Offline Offline

Пол: Мужской
Сообщений: 185


« Ответ #12 : 09.03.2012, 18:43:39 »

ELLE, вы правы, ошибка исправлена
Записан
danik.html
Практически профи
*******

Репутация: +351/-4
Offline Offline

Пол: Мужской
Сообщений: 2723



« Ответ #13 : 09.03.2012, 19:01:30 »

А че папки с картинками производителей стороной обошел? Хотя не, кому нужно тот сам допишет )
Записан
Aspik
Завсегдатай
*****

Репутация: +63/-2
Offline Offline

Пол: Мужской
Сообщений: 546

В личку не писать, не отвечу.


« Ответ #14 : 09.03.2012, 19:50:20 »

Ага, точно, они решили забить Azn Хотя на JED'е вроде как это обязательное требование.
Во всех папках должны быть index.html !  Любой php файл должен содержать defined('_JEXEC') or die; Исправить же не долго, а вот из каталога вылетят из-за этого запросто. Sad
Записан
danik.html
Практически профи
*******

Репутация: +351/-4
Offline Offline

Пол: Мужской
Сообщений: 2723



« Ответ #15 : 09.03.2012, 19:56:19 »

Они итак уже вылетели Azn
Записан
kurandin
Осваиваюсь на форуме
***

Репутация: +5/-0
Offline Offline

Сообщений: 161



« Ответ #16 : 19.03.2012, 00:44:15 »

Поправка на ветер!

Ваш сайт должен быть доступен только по одному адресу: ИЛИ с www ИЛИ без www - выбор за вами. Со второго адреса нужно настраивать 301 редирект на основной домен, который указан в директиве Host в robots.txt

На счет .htaccess - файл настраивается индивидуально.

В нем можно прописать следующее

Код:
Options -Indexes
запрет листинга каталогов
301 редирект на "без www"

Остальное настраивается индивидуально.

я так и сделал
после этого у меня открывалась только главная страница - все линки переадресовывались на нее
Записан
StyleRocket
Завсегдатай
*****

Репутация: +4/-3
Offline Offline

Сообщений: 567


« Ответ #17 : 12.04.2012, 21:10:01 »

Поправка на ветер!

Ваш сайт должен быть доступен только по одному адресу: ИЛИ с www ИЛИ без www - выбор за вами. Со второго адреса нужно настраивать 301 редирект на основной домен, который указан в директиве Host в robots.txt

На счет .htaccess - файл настраивается индивидуально.

В нем можно прописать следующее

Код:
Options -Indexes
запрет листинга каталогов
301 редирект на "без www"

Остальное настраивается индивидуально.
## Mod_rewrite in use.

RewriteEngine On

RewriteCond %{HTTP_HOST} ^www\.site\.ru$ [NC]
RewriteRule ^(.*)$ http://site.ru/$1 или %{REQUEST_URI} [L,R=301]
Можно вопрос, мне так и прописывать если (Добавлять суффикс к URL в положении НЕТ), боюсь что дубли будут
Записан
AxMan
Захожу иногда
**

Репутация: +0/-0
Offline Offline

Сообщений: 17


« Ответ #18 : 17.04.2012, 23:10:13 »

Спасибо.
В дополнение скажу следующее:

Как правильно заполнить каталог продукции на сайте?

1. Компания-реселлер размещает продукцию производителя на собственном сайте. При этом обычно полностью копируется текст описания товара и его изображения с сайта производителя. В результате поисковые системы считают страницы каталога на сайте реселлера дублированным контентом. Такие страницы либо не показываются в результатах поиска, либо показываются только при поиске по определенному региону.
Решение: переписать описание товара. Иногда описание представляет собой таблицу, либо технические характеристики, которые нельзя переформулировать по своему. В таких случаях, необходимо добавить свои комментарии, советы по использованию. Можно разместить отзывы клиентов.

2. Если у каждого товара имеется страница с подробным описанием, необходимо спрятать от поисковых систем все промежуточные страницы, позволяющие перемещатся по каталогу, включая поиск по каталогу, постраничную навигацию по разделам, страницы спецпредложений. Запретить индексацию этих страниц можно в файле robots.txt.

Disallow: /catalog/search
Disallow: /catalog/page/*
...
Если этого не сделать, то поисковые системы посчитают, что эти страницы частично дублируют контент, размещенный на конечных страницах каталога. Это ухудшит оценку качества сайта и плохо повлияет на продвижение сайта в поисковых системах. Для Google особенно важно отсутствие дублированного и частично дублированного контента.

3. Структура каталога. Желательно, чтобы уровни разделов и подразделов каталога соотносились с глубиной адресов страниц. Например:

Каталог продукции                                                                                        http://site.ru/catalog
Каталог продукции\Оборудование                                                                   http://site.ru/catalog/oborudovanie
Каталог продукции\Оборудование\Для заморозки                                             http://site.ru/catalog/oborudovanie/frost
Каталог продукции\Оборудование\Для заморозки\Замораживатель №1234           http://site.ru/catalog/oborudovanie/frost/1234

Правильно организованная структура каталога позволяет Яндексу размещать быстрые ссылки в результатах поиска. Кроме того, если названия разделов каталога являются ключевыми словами, их упоминание в адресе конкретной позиции положительно повлияет на продвижение товара по этим фразам.

Отличное дополнение, для полноты.

P.S. Извините, если не по теме, но только сюда подойдет.
« Последнее редактирование: 18.04.2012, 01:29:37 от AxMan » Записан
AxMan
Захожу иногда
**

Репутация: +0/-0
Offline Offline

Сообщений: 17


« Ответ #19 : 25.04.2012, 12:28:18 »

Код:
Disallow: /*product
Disallow: /*category

А это не уберет из поиска страницы на товар и категории?
Как же тогда человек ищущий конкретный товар, в поиске на меня нарвётся? =(
Записан
danik.html
Практически профи
*******

Репутация: +351/-4
Offline Offline

Пол: Мужской
Сообщений: 2723



« Ответ #20 : 25.04.2012, 16:36:53 »

3. Структура каталога. Желательно, чтобы уровни разделов и подразделов каталога соотносились с глубиной адресов страниц. Например:

Каталог продукции                                                                                        http://site.ru/catalog
Каталог продукции\Оборудование                                                                   http://site.ru/catalog/oborudovanie
Каталог продукции\Оборудование\Для заморозки                                             http://site.ru/catalog/oborudovanie/frost
Каталог продукции\Оборудование\Для заморозки\Замораживатель №1234           http://site.ru/catalog/oborudovanie/frost/1234

Правильно организованная структура каталога позволяет Яндексу размещать быстрые ссылки в результатах поиска. Кроме того, если названия разделов каталога являются ключевыми словами, их упоминание в адресе конкретной позиции положительно повлияет на продвижение товара по этим фразам.

Кстати както ради интереса делал такое в джумшопе. Работало. Осталось только оптимизировать использование ресурсов.
Кому интересно -  пишите, может быть доработаю решение. Там еще по пути корректная работа с привязкой категорий к пунктам меню была сделана...
Записан
N.Nick
Давно я тут
****

Репутация: +5/-0
Offline Offline

Пол: Мужской
Сообщений: 234



« Ответ #21 : 07.05.2012, 12:48:31 »

Я что-то так и не понял этой строки:
Disallow: /component
Я так понял что нужно добавить слеш Disallow: /component/
Или сделать Disallow: /*component

И ешё почему это не прописано
Disallow: /index.php?
Disallow: /index.html
Disallow: /index.php
Или оно не нужно?

И вот это нужно или нет, я тоже не понял:
Disallow: /*product
Disallow: /*category
Поисковики что тогда будут видеть?
Записан
orexov_m
Давно я тут
****

Репутация: +23/-0
Offline Offline

Пол: Мужской
Сообщений: 270


« Ответ #22 : 11.05.2012, 06:38:06 »

У меня вообще непонятно почему товаров нет в индексе. хотя Яндекс загрузил 272 урл а вот в поиске всего 23.
То есть ссылки на материалы и категории. А вот ссылок на товары напрочь нет и все тут Sad
вот код robots.txt подскажите почему не индексируются товары Sad
Код:
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Аllow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /*user
Disallow: /component
Disallow: /*product
Disallow: /*category
Disallow: /*cart
Disallow: /*search
Disallow: /*wishlist
Disallow: /*?tmpl
Allow: /components/com_jshopping/files/img_products/
Allow: /components/com_jshopping/files/img_categories/
Host: domen.ru
Sitemap: /index.php?option=com_xmap&view=xml&tmpl=component&id=1
Записан
johnrass
Осваиваюсь на форуме
***

Репутация: +26/-0
Offline Offline

Пол: Мужской
Сообщений: 126


« Ответ #23 : 11.05.2012, 15:53:42 »

Зайдите в Яндекс Вебмастер и там проверьте блокирует ли робот.тхт или нет (Настройка индексирования --> Анализ robots.txt --> Список URL
добавить)
Записан
orexov_m
Давно я тут
****

Репутация: +23/-0
Offline Offline

Пол: Мужской
Сообщений: 270


« Ответ #24 : 11.05.2012, 16:08:03 »

Зайдите в Яндекс Вебмастер и там проверьте блокирует ли робот.тхт или нет (Настройка индексирования --> Анализ robots.txt --> Список URL
добавить)
я так то в урл которые в индекс яндекса добавлены вижу 23 как написал выше, остальные Яндекс не видит. поэтому и спрашиваю как сделать чтобы он тоже их добавил
Записан
AxMan
Захожу иногда
**

Репутация: +0/-0
Offline Offline

Сообщений: 17


« Ответ #25 : 11.05.2012, 17:10:05 »

Тоже интересно. Может кто поделится опытом ?  Angry
Записан
nevigen
Moderator
*****

Репутация: +734/-16
Offline Offline

Пол: Мужской
Сообщений: 8807


http://n*****n.com


« Ответ #26 : 11.05.2012, 17:15:46 »

все сразу в индекс не попадает. со временем будет больше.
Записан
johnrass
Осваиваюсь на форуме
***

Репутация: +26/-0
Offline Offline

Пол: Мужской
Сообщений: 126


« Ответ #27 : 11.05.2012, 17:16:24 »

Приведите вариант ссылки которую игнорирует Яндекс.
Sitemap: /index.php?option=com_xmap&view=xml&tmpl=component&id=1 должна быть вида
Sitemap: domen.ru/index.php?option=com_xmap&view=xml&tmpl=component&id=1
Записан
orexov_m
Давно я тут
****

Репутация: +23/-0
Offline Offline

Пол: Мужской
Сообщений: 270


« Ответ #28 : 11.05.2012, 17:18:11 »

Приведите вариант ссылки которую игнорирует Яндекс.
Sitemap: /index.php?option=com_xmap&view=xml&tmpl=component&id=1 должна быть вида
Sitemap: domen.ru/index.php?option=com_xmap&view=xml&tmpl=component&id=1
с этим уже разобрался сам и поправил. но все равно спс Azn
Записан
orexov_m
Давно я тут
****

Репутация: +23/-0
Offline Offline

Пол: Мужской
Сообщений: 270


« Ответ #29 : 11.05.2012, 17:18:39 »

все сразу в индекс не попадает. со временем будет больше.

сайту уже больше двух месяцев, как то маловато ссылочек в индексе мне кажется
Записан
Страниц: [1] 2 3 4 5 6 7   Вверх
  Добавить закладку  |  Печать  
 
Перейти в:  

Powered by SMF 1.1.21 | SMF © 2006, Simple Machines

Joomlaforum.ru is not affiliated with or endorsed by the Joomla! Project or Open Source Matters.
The Joomla! name and logo is used under a limited license granted by Open Source Matters
the trademark holder in the United States and other countries.

LiveInternet