Добрый день коллеги.
Возникло проблема с сайтом, а точней со страницами на сайте.
Хостинг agava.ru.
После заливки сайта на хостера, и удачной индексации на сайте, начал замечать непонятные вещи.
Открывая главную страницу сайта в ссылках прописывалось что-то вроде этого /index.php?option=com_content&view=article&id=102&Itemid=125&cac440dec291b7155a677c96259a3489=7efe094415c8030aa7bacf2b985f003a
А когда Яндекс проиндексировал страницы, я увидел склейку:
_http://www.site.ru/index.php?option=com_content&view=article&id=102&Itemid=125
_http://www.site.ru/index.php?option=com_content&view=article&id=102&Itemid=125&cac440dec291b7155a677c96259a3489=d51d91eff31c681d4c2d222a5347188d
Немного по гуглив, нашел на одном сайте описание, в .htaccess прописал:
php_value session.use_trans_sid 0
php_value session.use_only_cookies 1
Это какрас убивает cac440dec291b7155a677c96259a3489=d51d91eff31c681d4c2d222a5347188d
Беда исчезла, но по логам в cPanel X, когда обходит "яндекс" вижу:
/index.php?option=com_content&view=article&id=108&Itemid=64&cac440dec291b7155a677c96259a3489=c
Agent: Yandex/1.01.001 (compatible; Win16; I)
/index.php?option=com_content&view=article&id=109&Itemid=70&cac440dec291b7155a677c96259a3489=c
Agent: Yandex/1.01.001 (compatible; Win16; I)
Подскажите мне пожалуйста, как убрать дубли с сайта?
В robots.txt для Яндекса прописал:
User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Crawl-delay: 5
Disallow:
Clean-param: cac440dec291b7155a677c96259a3489 /index.php
Может это еще, что нибудь скажет:
HTTP/1.1 200 OK
Server: nginx/0.7.62
Date: Fri, 12 Feb 2010 16:29:51 GMT
Content-Type: text/html; charset=utf-8
Connection: close
Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Expires: Mon, 1 Jan 2001 00:00:00 GMT
P3P: CP="NOI ADM DEV PSAi COM NAV OUR OTRo STP IND DEM"
Pragma: no-cache
X-Powered-By: PHP/4.3.9
Set-Cookie: cac440dec291b7155a677c96259a3489=71e4e4f9faea33fc585497c414b838b4; path=/
Last-Modified: Fri, 12 Feb 2010 16:29:51 GMT