robots.txt - Поисковая оптимизация, продвижение сайтов на Joomla (SEO)

Поясните пожалуйста знатоки, научился делать сайты на Joomla 1.5, пришла очередь оптимизировать под seo, здесь я совсем зеленый.
Вопросы:
взял за пример образеч файла в одной теме:

1. Disallow: /cache/
Disallow: /components/
Disallow: /includes/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

что именно будет запрещено в этих строках и зачем это нужно запрещать?

2. Для Google и Яндекса строки в robots должны быть одинаковы?

3. Приведенные примеры файла robots, выложенные на форуме, можно вставить в свой сайт или они зависят от того какие компоненты есть на сайте. т.е. для каждого сайта свой robots.txt?

4. Что будет если оставить robots.txt без изменений по умолчанию, как энто повлияет не индексацию?

Думаю эти вопросы интересны многим новичкам, заранее благодарен за ответы

ну сколько раз можно одно и тоже мусолить..  ((  ну неужели так трудно прочитать тему в шапке ветки?!..

читал тему в шапке, но там приведены примеры файла, по поводу заданных мной вопросов ничего не нашел.

1. что именно непонятно? К примеру /cache/ полностью закрывает директорию cache от индексирования. Остальное по аналогии.
Зачем? .. даже не знаю как ответить на такой шокирующий вопрос ))) - затем чтобы в индексе поисковой системы была информация необходимая пользователю, а не рабочие фалы.

2. для Яндекса индивидуально стоит прописывать только Host:

3. для каждого сайта свой robots.txt - но принципиальных различий нет.

4. будет много мусора в выдаче ПС, возможны проблемы с зеркальшиком, без указания sitemap возможно немного ухудшится эффективность обхода роботом - хотя всё кроме дублей не критично.