Как бороться с ботами Яндекса? - Joomla 1.5: Настройка и оптимизация

Добрый день! Уже наверное месяцев 6 назад удалил компонент ads_manager, а боты ядекса все продолжают находить страницы типа:

/component/option,com_adsmanager/page,write_ad/catid,1/Itemid,98/
/component/option,com_adsmanager/page,write_ad/catid,1/Itemid,175/
/component/option,com_adsmanager/page,show_category/catid,2/order,0/expand,-1/Itemid,175/
/component/option,com_adsmanager/page,show_all/order,0/expand,0/Itemid,98/
/component/option,com_adsmanager/page,show_ad/adid,37/catid,2/Itemid,98/

и приписывать их к страницам с ошибками... Причем, чаще всего, даже не указывается на какой странице была найдена ссылка. Можно ли как-то через robots или как-то еще, решить эту проблему?

Заранее спасибо!

скорее всего они не "продолжают находить", а простукивают адреса которые были ранее загружены ботом, а так как страниц таких уже нет, бот получает 404 - соответственно в вебмастере вы видите увеличение страниц с ошибками.
можно в роботсе прописать
Disallow: /*com_adsmanager
и подождать еще с месяц-два, а потом если не поможет -  написать в саппорт.

После этого воспользуйтесь формой «Удалить URL», и тогда при следующем обходе роботом вашего сайта, все удаленные и запрещенные к индексированию страницы исчезнут из результатов поиска.

Еще проверь битые ссылки на сайте, я проверяю с помощью Xenu

После этого воспользуйтесь формой «Удалить URL», и тогда при следующем обходе роботом вашего сайта, все удаленные и запрещенные к индексированию страницы исчезнут из результатов поиска.

Пытаюсь удалить. Ошибка: Указанный URL не проиндексирован. Забавно и ничего не понятно...

Не обращай внимание он всегда так пишет
Не удобная форма для удаления но ни чего не поделаешь)))

Не обращай внимание он всегда так пишет
Не удобная форма для удаления но ни чего не поделаешь)))

скажите, но это гарантирует отмену индексации этих страниц? может можно как-то понадежнее их скрыть? через robots.txt или еще как?

скажите, но это гарантирует отмену индексации этих страниц? может можно как-то понадежнее их скрыть? через robots.txt или еще как?

Лицензию Яндекса читал?
Или доля в собственности его не меньше Садовского, чтобы он что-то гарантировал?

я не в смысле надежности спрашивал, а в смысле будут ли страницы исключены, несмотря на возникающую ошибку (Ошибка: Указанный URL не проиндексирован)?!

Пустые разговоры пользы не приносят

Как исключить сайт или некоторые страницы из поиска?

Удалите страницы со своего сайта (таким образом, чтобы сервер при обращении по заданному URL выдавал в заголовках ответа ошибку 404) либо запретите их индексирование в robots.txt.

После этого воспользуйтесь формой «Удалить URL», и тогда при следующем обходе роботом вашего сайта, все удаленные и запрещенные к индексированию страницы исчезнут из результатов поиска.

При этом запрет индексирования не гарантирует того, что сайт (в твоем случае страницы) будет отсутствовать в результатах поиска, т.к. он может искаться по ссылкам, которые находятся на сторонних сайтах (либо с других статей поэтому писал выше про битые ссылки).

P.s. Если я сейчас проставлю ссылку на не существующую страницу на твоем сайте. то ты не сможешь удалить эту ошибку пока я не удалю эту ссылку