Оптимизация MySQL запросов - Joomla 2.5: Настройка и оптимизация

Доброго времени суток! Взял на обслуживание сайт на Joomla 2.5 c несколькими тысячами статей. Хостер заваливает письмами о превышении нагрузки SQL. Одно из них под катом.

Как понять, что именно нагружает базу? SQL запросы до этого не изучал.

Сообщение от хостера:

com_content

PS. А это вы очень погорячились..

несколькими тысячами статей.

Всё так плохо?
А если закешировать все нафиг, включая запросы к SQL?

А переезд на К2 может помочь?

Можно попробовать.
Читать.

Включил gzip сжатие страниц, кеширование(плагин кеширования был отключен почему-то, включил) выставил 60 минут, убрал 10 тысяч редиректов и выключил плагин редиректов, сделав одну страницу 404. Удалил из базы данные, оставшиеся от Joomla 1.5.
После этого сайт вешает базу каждые 5 минут. 
Хотя в логах хостера медленные запросы, которые раньше были причиной, исчезли.
WTF?

Наверно стоит задуматься о более мощном хостинге.

тоже так думал. заказчик хвалит хостинг "Джино", на котором у него премиум аккаунт. Я с джинами не работал, про их мощность не знаю.

Интересно сколько это добро стоит в месяц. Если хвалит, то почему падает?

8000 статей, 10000 посещений в сутки. Хватает ли для такого возможностей хостинга и Joomla - трудно сказать. Жесткий лимит CPU у него - 30%, времени запросов - 150 с.

Думаю, конструкторы контента тут не помогут. Прямой путь на vps, которого хватит.

Уговорил заказчика переезжать на vds. Даже согласны на выделенный сервер (в ближайшем будущем планируют ещё три высоконагруженных проекта.)
Большая просьба к знающим и опытным: подскажите, какие параметры железа выбрать под указанные выше нагрузки?
И вторая маленькая просьба: какие компании посоветуете, чтобы грамотная русская техподдержка была?

А на какую цену вы рассчитываете?

В подписи.
ТП Земля или  выше.

Ну если так подходить к делу, то у меня в подписи две последние ссылки. На последнем точно тормозить не будет и не нужно нанимать настройщика. Сами неплохо делают, только попросить надо + сеть доставки контента к заказу.

а мне мой нравится
тот что в подписи

референтных ссылок накидали )) ну я так и рассчитывал. Сумма до 3000 в месяц. Присматриваемся к fornex.com 2 Ггц 2 Гб RAM. Должно заработать, как считаете?
wishlight, как на fornex.com с техподдержкой? она русская и добрая? И что именно у них входит в базовое администрирование?
Спасибо.

fornex - поддержка русская. Бесплатное базовое администрирование. Про доброту не знаю. Хотя хостпро лучше определенно.

В любом случае лучше нанять админа - поставить munin, настроить размер временных таблиц, переопределить tmpfs в оперативку - на этом можно в десятки раз ускорить в данном случае.

Выбираем между http://fastvps.ru/ и https://fornex.com/. Первые дешевле, вторые как-то с виду серьезней. И техподдержка форнекса отвечает в течении нескольких минут. Что посоветуете?

fornex для меня. fastvps показались грубоватыми в общении.

Заказали сервер с настройкой на fornex. В это время старый хостер заблокировал аккаунт и прислал письмо следующего содержания:


Переезд на vps ТОЧНО? решит проблему с загрузкой, или всё-таки тут есть какой-то косяк?

Этот сайт создавался изначально на J2.5 или была миграция с предыдущих версий?

была миграция с полторашки, с виду довольно кривая

Проверьте таблицу #_assets. Там не должно быть более одной записи с parent_id и level c 0. Также есть и др. условия. Возможно ваш случай. Для чтения http://docs.joomla.org/Fixing_the_assets_table. Если действительно повреждена, то восстановите ее. Инструкции по ссылке.

спасибо, посмотрю

Посмотрел инструкцию, в таблице #_assets не было ничего криминального, но я повелся на пункт "If you have any articles or categories not in the asset table then you have a broken asset table." Поскольку статей на сайте более 8000, и в корзине я нашёл какие-то старые и неудаляемые, принял решение перелопатить таблицу по-полной. В итоге обновил структуру категорий, разбил статьи так, чтобы в одной категории не было больше 200 штук, заменил для всех статей алиасы на номер id, поправил ссылки на сайте и включил кеширование на 300 минут (сайт обновляется раз в неделю, можно и больше выставить).
Как только закончил переносить статьи, нагрузка процессора упала с 98-100% до 60-80% и стабильно, без пиков, держится на этом уровне. Когда никто не шарится в админке (у меня там под одним аккаунтом сидят топ-менеджер. ген.директор и просто директор), процессора жрет и того меньше - 30-60%. В общем, пока даже не пригодились хаки Joomla на отключение количества хитов для статьи и проверку на даты с точностью до секунды.

НО! Теперь сервер расходует много памяти. До оптимизации MySQL - скачками 0,8-1 Гб, после - 1,3-1,5 Гб, причем держится почти на одном уровне, независимо от времени суток и посетителей. Вверх не скачет, но напрягает, потому что непонятно. Это нормально или нет?
Вот картинка:

Уточните, вы уже на VPS? Если да, вручную очистите папку cache и исправьте скриптом таблицу assets (большой сайт), скрипт по ссылке:
http://forum.joomla.org/viewtopic.php?p=2741024#p2741024 (бэкап сайта перед этим сделайте).

Да, я уже на VPS. Папку почищу, скрипт запускать из корня сайта? никаких переменных в нем менять не нужно?

Можно и из корня. Не знаю, как у вас настроен php -поэтому лучше назначьте ему владельца и группу apache. при необходимости добавьте в нем только php после <?.