seo анализаторы и component/search - Поисковая оптимизация, продвижение сайтов на Joomla (SEO)

вот кто скажет про такое:
короче на сайте всего с десяток страниц текста, не считая страниц товаров в магазине
seo анализаторы показывают, что всего страниц в индексе 6000
когда открываешь "на посмотреть", то видишь адреса в основном из component/search

http://site.ru/component/search/?searchword=кл+лиц&searchphrase=all&ordering=newest
http://site.ru/component/search/?searchword=РєРѕРЅС„&searchphrase=all&ordering=newest

та же фигня с одинаковыми страницами (совпадающими)

100%   [T] http://site.ru/component/search/?searchword=лиц+1СЃ&searchphrase=all&ordering=newest
100%   [T] http://site.ru/component/search/?searchword=лиц+20&searchphrase=all&ordering=newest
100%   [T] http://site.ru/component/search/?searchword=лиц+50&searchphrase=all&ordering=newest

это что так и должно быть или это нужно как-то отключать?

Лучше закрыть в robots.txt

Disallow: /component/search/

так есть уже там 
Disallow: /components/

вот он весь:

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /proba/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /index2.php?option=com_content&task=emailform
Disallow: /*?sl*
Disallow: /index.php?*
Disallow: *.pdf$
Disallow: /name.php?action=print
Disallow: /trackback
Disallow: /*rss.html
Disallow: /*atom.html
Crawl-delay: 2
Host: site.ru.ru
Sitemap: http://site.ru.ru/index.php?option=com_xmap&sitemap=1&view=xml

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /proba/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /index2.php?option=com_content&task=emailform
Disallow: /*?sl*
Disallow: /index.php?*
Disallow: *.pdf$
Disallow: /name.php?action=print
Disallow: /trackback
Disallow: /*rss.html
Disallow: /*atom.html
Crawl-delay: 2
Sitemap: http://site.ru/index.php?option=com_xmap&sitemap=1&view=xml

надо так:
Disallow: /search
или так все содержащие «?»:
Disallow: /*?
но тогда Google Sitemap в твоём случае не будет видеть
и убери лишний Sitemap для Yandex - просто отдели пустой строкой после части для всех роботов - Yandex увидит.

у меня твой robots будет выглядеть так:

p.s.
- часть строк уже можно выкинуть отсюда если используем Disallow: /*?

так есть уже там
Disallow: /components/

надо не components а komponent

Мы стараемся не индексировать или не ранжировать высоко:

траницы сайта с результатами поиска.

По любому закрывать от индесации

надо не components а komponent

какова komponent когда папка называется components ?

Сайт динамический, на папки ему плевать, все строиться на переменных в строке запроса, по этому надо не обращать внимание на папки и обратить более пристальное внимание на переменные.

какова komponent когда папка называется components ?

вот ваши дубли
http://site.ru/component/search/

Сайт динамический, на папки ему плевать, все строиться на переменных в строке запроса, по этому надо не обращать внимание на папки и обратить более пристальное внимание на переменные

ну тогда, наверное, что-то типа option = com_search

Именно, но это надо прописать  в правила для роботов на понятном для них языке.

вот ваши дубли
http://site.ru/component/search/

убедил, я как то даже не обратил внимание

похоже что это поиск вертуя - т.к. весь этот мусор из поиска мага

вот так достаточно будет?

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /component/*
Disallow: /component/search/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /index2.php?option=com_content&task=emailform
Disallow: /*?
Disallow: /404
Disallow: /search
Disallow: /*?sl*
Disallow: /index.php?*
Disallow: *.pdf$
Disallow: /name.php?action=print
Disallow: /trackback
Disallow: /*rss.html
Disallow: /*atom.html
Crawl-delay: 2
Host: site.ru

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /component/*
Disallow: /component/search/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /index2.php?option=com_content&task=emailform
Disallow: /*?
Disallow: /404
Disallow: /search
Disallow: /*?sl*
Disallow: /index.php?*
Disallow: *.pdf$
Disallow: /name.php?action=print
Disallow: /trackback
Disallow: /*rss.html
Disallow: /*atom.html
Crawl-delay: 2

Sitemap: http://site.ru/index.php?option=com_xmap&sitemap=1&view=xml


видел еще применяют такую строку:
Disallow: /component/content/
не знаю нужна она...

никакие * не работают.... по крайней мере для Google...

никакие * не работают.... по крайней мере для Google...

всё работает -> http://code.google.com/intl/ru/web/controlcrawlindex/docs/robots_txt.html
-------------------------------------------
проигнорирует если на такую страницу будет стоять ссылка,- в таком случае в вебмастере может появиться предупреждение, типа в роботсе закрыты важные страницы вашего сайта.