Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 6 Ответов
  • 1660 Просмотров
*

Аня

  • Давно я тут
  • 745
  • 33 / 0
  • Копатыч нестабилен!
Произошла ошибка
1104 The SELECT would examine more than MAX_JOIN_SIZE rows; check your WHERE and use SET SQL_BIG_SELECTS=1 or SET MAX_JOIN_SIZE=# if the SELECT is okay


Вот такую ошибку вижу на некоторых из моих сайтов на J4 на странице обновления. Чтобы обновиться, иду в /libraries/vendor/joomla/database/src/Mysqli/MysqliDriver.php и каждый раз вписываю:
Код
{
$this->connection->query('SET @@SESSION.sql_mode = \'' . implode(',', $this->options['sqlModes']). '\';');
mysqli_query($this->connection,"SET SQL_BIG_SELECTS = 1;" );
}
Что это?
Читала тему https://forum.joomla.org/viewtopic.php?f=812&t=992067 ни черта не поняла, кроме "нехорошего совета".
Fatal error - это не фатально!!! Я проверила.
*

sivers

  • Живу я здесь
  • 2596
  • 360 / 0
Похоже, что в этом не Joomla виновата, а настройки сервера. Этот лимит записей выборки можно изменить в настройках MySQL (файл my.cnf на сервере). Параметр там называется max_join_size. Но это если у вас впс. Или хостера просите увеличить значение этого параметра.
На связи в telegram @sivers
sivers @ inbox . ru
https://sivers.su/
*

Аня

  • Давно я тут
  • 745
  • 33 / 0
  • Копатыч нестабилен!
Похоже, что в этом не Joomla виновата, а настройки сервера. Этот лимит записей выборки можно изменить в настройках MySQL (файл my.cnf на сервере). Параметр там называется max_join_size. Но это если у вас впс. Или хостера просите увеличить значение этого параметра.
У меня не впс. Вот что техподдержка мне на это отвечает:
Нет, вы можете задать его только в скриптах.
Ну, окей, я в файл  вписываю эту хрень, она исчезает, я снова вписываю. Но это же не вариант. И не я одна ведь имею эту ошибку!
Fatal error - это не фатально!!! Я проверила.
*

sivers

  • Живу я здесь
  • 2596
  • 360 / 0
Ну, окей, я в файл  вписываю эту хрень, она исчезает, я снова вписываю. Но это же не вариант. И не я одна ведь имею эту ошибку!
Вероятно, ее имеют все, кто пользуется услугами таких хостеров.
Более "правильного" способа интеграции вашей правки я не нашел.
Отсюда вариантов решения могу предложить 2:
1. Сменить хостера.
2. Сделать плагин, который будет срабатывать после обновления Joomla и вносить вашу правку, если она исчезла. Костыль, конечно, но хоть не вручную каждый раз.
На связи в telegram @sivers
sivers @ inbox . ru
https://sivers.su/
*

Аня

  • Давно я тут
  • 745
  • 33 / 0
  • Копатыч нестабилен!
Ну, тут поражает, что это охватывает не все мои сайты на джино! А  только часть. Пока я еще могу вручную вносить. Я еще не целиком на 4 переехала. Но если, конечно, надо будет для 20 сайтов так делать... Я, честно говоря, верю, что частенько глюки случаются, но потом они рассасываются сами собой.
Fatal error - это не фатально!!! Я проверила.
*

bugmenot

  • Захожу иногда
  • 230
  • 11 / 2
  • za3.by
Произошла ошибка
1104 The SELECT would examine more than MAX_JOIN_SIZE rows; check your WHERE and use SET SQL_BIG_SELECTS=1 or SET MAX_JOIN_SIZE=# if the SELECT is okay


Вот такую ошибку вижу на некоторых из моих сайтов на J4 на странице обновления. Чтобы обновиться, иду в /libraries/vendor/joomla/database/src/Mysqli/MysqliDriver.php и каждый раз вписываю:
Код
{
$this->connection->query('SET @@SESSION.sql_mode = \'' . implode(',', $this->options['sqlModes']). '\';');
mysqli_query($this->connection,"SET SQL_BIG_SELECTS = 1;" );
}
Что это?
Читала тему https://forum.joomla.org/viewtopic.php?f=812&t=992067 ни черта не поняла, кроме "нехорошего совета".
А куда конкретно его вписывать? попробовал, выдало критическую ошибку 500
*

bugmenot

  • Захожу иногда
  • 230
  • 11 / 2
  • za3.by
Сам себе и отвечу, пишем в техпотдержку хостера и всё решено
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Ошибка обновления 42000, 1104

Автор Elevyr

Ответов: 7
Просмотров: 2621
Последний ответ 18.02.2024, 16:55:08
от siao
sql запрос select

Автор lynx777

Ответов: 0
Просмотров: 457
Последний ответ 09.11.2023, 08:56:44
от lynx777