Сайт много ресурсов жрет - Joomla 3.x: Общие вопросы

Нагрузка на сервер превышает допустимые лимиты -типа   cpu от 90 до 170 %
хостер пишет гневное письмо - соблюдайте типа приличия  - по вашему тарифу допустимо
cpu 40% максимум

в логах заметил каждую секунду выполняется такие запросы
xxxxxxxxx.ru:8080 GET /component/ajax/?format=json HTTP/1.0
за один только день
http://www.*******.ru/component/ajax/     29549 запросов

отключил компонент Интерфейс Ajax   
на любой странице сайта в  консоли разработчика стали каждые 2-3 секунды выдаваться одинаковые сообщения

core.js?8a15ff7ec902ca0fe97f58d9ca7dfc8e:1 GET http://www.******.ru/index.php?option=com_ajax&format=json 404 (Not Found)

файл на который ругается консоль, типа это он делает запрос лежит в \media\system\js\core.js - но это файл из cms

в разделе  head выводится
{"interval":300000,"uri":"\/component\/ajax\/?format=json"}
но судя потому как часто выводятся сообщения в консоли, когда компонент AJAX отключен, интервал никак не 300 тыс миллисекунд

вот нафига сайт делает так часто эти запросы?
посмотрел статистику - несколько дней назад такое пошло. обновлений вроде не делал. на вирусы проверил, ничего подозрительного

вот нафига сайт делает так часто эти запросы?

Боты по ссылкам.Запретить доступ к сайту ботам, и прописать в robots.txt

Дело не в ботах. На сайт зашел обычный пользователь и сайт  так с каждой страницы делает запросы. НЕ закрывать же сайт от всех пользователей.

зашел на *******.ru посмотреть запросы - никаких запросов не вижу

зашел на *******.ru посмотреть запросы - никаких запросов не вижу

http://www.mzta.ru 84.52.93.229 - - [01/Apr/2018:07:34:02 +0300] "GET /component/ajax/?format=json HTTP/1.1" 200 660 "http://www.mzta.ru/prajs-list" "Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:58.0) Gecko/20100101 Firefox/58.0" 0.601
http://www.mzta.ru 94.143.241.177 - - [01/Apr/2018:07:34:05 +0300] "GET /component/ajax/?format=json HTTP/1.1" 200 660 "http://www.mzta.ru/support-mzta/video?start=20" "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/64.0.3282.186 Safari/537.36" 0.632
http://www.mzta.ru 158.181.250.32 - - [01/Apr/2018:07:34:10 +0300] "GET /component/ajax/?format=json HTTP/1.1" 200 660 "http://www.mzta.ru/support-mzta/project" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 YaBrowser/18.1.1.839 Yowser/2.5 Safari/537.36" 0.462

зашел, никаких повторяющихся запросов кроме вебвизора в консоли не вижу - http://prntscr.com/iz794s

ну вот дождался ваших 300000 мс (т.е. 5 минут) - был 1 запрос http://prntscr.com/iz7abz . не вижу ничего аномального

Скорее всего вам надо настраивать кеширование, чтобы снизить нагрузку. И кстати, смысла указывать crawl delay нету, поисковики игнорируют данное правило.

GET /component/ajax/?format=json
В логе это несколько раз в минуту и разный IP.
Обычно статистика Яндекс фиксирует в среднем по 1700 в будний день и по 100 посетителей в выходные.

Кеширование и минификация CSS, Js и HTML было настроено, но временно недавно отключено

Статистика показывает превышение cpu более месяца
За это время были обновления на сайте

В статистике других сайтов этого злосчастного AJAX запроса нет и раньше на этом сайте не было

В логе это несколько раз в минуту и разный IP.

ну значит несколько юзеров одновременно находятся на сайте и каждый шлет раз в пять минут

Около 30 тысяч подобных запросов за день это перебор и по несколько раз в одну минуту, согласно статистики. Посещаемость сайта в день в выходные очень низкая должна быть

та я то не против, что перебор. только что подсказать если я смотрю консоль и у меня таких запросов постоянных нет? если они есть в вашем браузере - ищите причину кто вызывает их.

И кстати, смысла указывать crawl delay нету, поисковики игнорируют данное правило.

Изменений в нагрузке на сайт клиента нет. Если нагрузку возрастает, хостер присылает письмо.
Хотя Google пишет ошибку на эту директиву.

Хотя Google пишет ошибку на эту директиву.

Яндекс тоже не обрабатывает, эту директиву имело смысл раньше указывать, сейчас бесполезно.