Блокировка ненужных поисковых систем и ботов - Поисковая оптимизация, продвижение сайтов на Joomla (SEO)

Дамы и господа, не поделитесь списком роботов и пауков, которых можно со спокойной душой банить? Типа yahoo, мета (украинский поисковик, с которого приходит ровно один человек за пять лет). Сайт рассчитан на русско говорящую часть интернета и поисковики Зимбабве абсолютно не нужны, и тратить на них ценные ресурсы сервера очень не хочется.

Всем спасибо и по кружке виртуального пива! 

а не проще составить белый список роботов (яша, гугль, мейл, рамблер и еще парочка)?

а не проще составить белый список роботов (яша, гугль, мейл, рамблер и еще парочка)?

Да нет, мне кажется. Как-то страшнова-то что ли. Хочется знать кого мы именно не пускаем.

Смелее! Смелее! Обещаю всем, кто поможет, много вкусной спаржи!

Вот в блоге Joostina статейка есть Блокировка ботов

Ага, прикольная статья, вот только этот список нужно не в robots.txt помещать, ибо этот файлик только рекомендация, а не указание. Проще отдавать белый лист. Не верю, что запись: "User-agent: TeleportPro Disallow: /" остановит teleport (или другую подобную программу).

Не верю, что запись: "User-agent: TeleportPro Disallow: /" остановит teleport (или другую подобную программу).

Ну, это да.
Там же в комментах к статье doctorgrif, как раз и пишет, что неплохо ещё и через .htaccess блокировать