Google Search Console, sitemap.xml и robots.txt - Поисковая оптимизация, продвижение сайтов на Joomla (SEO)

Всем доброго вемени суток,
у меня такая вот штука: заинтересровало меня как отображается мой сайт в поисковике Goggle.
Почитал и понял что за это ответственны Bot`ы от Google которые читают и индексируют всё на прополую если нет файлов sitemap.xml и robots.txt
(Я так понимаю и с ними тоже все на прополую, только то что указанно с большей вероятностью индексируют)

Почитал как их составлять, составил, зарегистрировался в в.у. консоле, залил карту сайта и положил в корень оба файла.
Прошло пару дей, катра сайта от части проиндесированнна, от части нет.
То что не доиндексировалось было затребовано для индексации. Ждёмс.....

На данный омент в Google присутствует ОЧЕНЬ большое колличество старых ссылок, прописаных через index.php
Ои работают, НО если честно немного смущают своим "index.php" от коротого я избавился уж как пару месяцев.
Может кто то подсказать как от их избавиться?



И ещё, на сайте есть три формуляра в .pdf-фрмате, они тоже проиндексированны поисковиком и висят в списке результатов.
Можно ли их временно заблокировать а тем временем внести в robots.txt "Disallow: /downloads/" и/или "Disallow: /*.pdf".
Т.е. они блокируются на примерно пол года а потом уже повторно не индексируются и пропадают из списка результатов?


.... и ещё на сайте есть два меню подвязанные к тожу же контенту, это "Продукты" и "Все продукты".
Т.е. "Продукты" это пункт меню а "Все продукты" это первый дуплирующийся подпункт.
Та же песя с пуктами "Ремонт" и "Все ремонты".
Как бы с ними быть, может прописать в карте сайта с нулевым приоритетом?


сайт: _https://www.fechtbedarf-bajtinger.de/






Заранее спасибо,
Игорь
 
 

Добрый день, search.google.com.




Удаляете + добавляете соответствующую запись в robots.txt, чтобы позже вновь не появилось в индексе.

ТС, есть правило - один вопрос - одна тема.
У вас там каша из полудюжины вопросов, не надо так.
И не надо сюда рассказы писать - пишите лаконично, лишние эпитеты хороши на литературном конкурсе

ТС, есть правило - один вопрос - одна тема.
У вас там каша из полудюжины вопросов, не надо так.
И не надо сюда рассказы писать - пишите лаконично, лишние эпитеты хороши на литературном конкурсе

Спасибо за замечание, учту.

Добрый день, search.google.com.




Удаляете + добавляете соответствующую запись в robots.txt, чтобы позже вновь не появилось в индексе.

Спасибо за скорую подсказку.
Я так понимаю это приминительно старых ссылок содержащих "index.php"?
А как прописывать что бы они вновь не индексировались?
"Disallow: index.php" ?, т.е. всё что после "mysite.com" до "index.php" после перепишется и дупликаты Google автоматом снесёт?
(Я не понимаю - ссылок с "index.php" нет но они перенаправдяются на рабочие ссылки без "index.php" или они всё же есть и будут индексипрованы вновь?)

Т.е. я их блокирую "временно", googl берёт из карты сайта новые ссылки без "index.php" и старые после разблокировки автоматически удаляет?


С .pdf-файлами я так понимаю, действовать так же (?)


А как быть с "Продукты" и "Все продукты"?
Только noidex?
Это черег Tag Manager?

Может я чего о не понимаю, но Google отказывается индексировать страницу по тому что на "не удобна для мобильных"? 
_https://ibb.co/jMRD8fP



EDIT: не понимаю если честно, если индексирование этих страниц проведено не было, почему они находятся чеез поисковик?
_https://ibb.co/K64cW46

Можно ли защититься от индексации таких вот URL: _https://www.fechtbedarf-bajtinger.de/ankuendigungen?rCH=-2
с помощью следующей записи в robots.txt: Disallow: /?rCH=-2/
?

(Как я нашёл, это что то связанное с Cookie-Hint, который у меня давно уже деактивирован, но URL в Google остался)
ПС: как старый контент гугл тоде отказался удалять, 4 раза заявление ставил.
В последствии заблокировал "временно".

.... или всё же Disallow: /ankuendigungen?rCH=-2/

Я бы записал так: