Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 0 Ответов
  • 804 Просмотров
*

Telion

  • Новичок
  • 4
  • 0 / 0
Ошибка 404
« : 18.12.2018, 10:21:18 »
Добрый день, озадачился я поведением своего магазина при вводе ошибочного URL. Joomla 3.9.1 Virtuemart 3.4.2

Началось все с того, что после перевода сайта с php 5.6 на php 7.2 резко выросла нагрузка на оперативную память хостинга. В логах появилась ошибка Alowed memory. Изначально было выделено 256 мб оперативки на скрипт, и эта ошибка их сжирала, хостер ругался, что память зашкаливает за 500 мб. Сейчас ограничил 128 мб на скрипт, нагрузка на хостинг упала до приемлемых 370 мб, но это же не решение :)

В логах "мойсайт.ru.error_log" ошибка выглядит так:
[Mon Dec 17 01:18:30.264120 2018] [php7:error] [pid 39225] [client 207.46.13.153:34676] PHP Fatal error:  Allowed memory size of 134217728 bytes exhausted (tried to allocate 81920 bytes) in /home/мойсайт/мойсайт.ru/docs/libraries/joomla/database/driver.php on line 2058

Функция с ошибкой в файле driver.php
Спойлер
[свернуть]

В логах "мойсайт.ru.access_log" в момент ошибки такая запись:
207.46.13.153 - - [17/Dec/2018:01:18:09 +0300] "GET /scs-components-2/connectors/rj-connectors HTTP/1.0" 404 216 "-" "Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)"

Я так понимаю бот пытался зайти по старой ссылке, в которой изменилась категория: было "scs-components-2", сейчас "scs-components".

Потестил в каких случаях появляется ошибка, выяснилось, что ошибки в адресе ведут себя по разному, и не так как бы хотелось:



Как видно из таблички в ситуации если есть ошибка в верхней категории и названии товара, то вылазит ошибка. Такая ссылка не возвращает никакого кода страницы, проверял с помощью Яндекс.вебмастера. Если выключаю галочку "Включить в VirtueMart обработку 404 ошибки", в настройках VirtueMart, то эта страница отдает код 404 и нагрузка на хостинг падает.

Какое поведение мне кажется правильным:


Помогите разобраться куда копать. Расскажите как у вас себя ведет вирт.


« Последнее редактирование: 18.12.2018, 11:39:00 от Telion »
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Ошибка mError: Could not find product with id 385, entries exists for language?

Автор sergspb

Ответов: 0
Просмотров: 2792
Последний ответ 11.03.2022, 14:00:28
от sergspb
Ошибка при экспорте категорий

Автор tmpnikl

Ответов: 3
Просмотров: 979
Последний ответ 06.05.2021, 13:36:08
от tmpnikl
Ошибка "vmError: Имя пользователя занято" при попытке сохранить настройки магазина

Автор Cueball

Ответов: 7
Просмотров: 6210
Последний ответ 16.05.2020, 17:05:15
от d0ublezer0
Ошибка - plg_recaptcha_error_incorrect_captcha_sol

Автор tromba

Ответов: 3
Просмотров: 1721
Последний ответ 23.07.2019, 18:15:32
от gartes
При сохранении настроек магазина ошибка 1118 Row size too large

Автор artem_wrong

Ответов: 7
Просмотров: 1750
Последний ответ 15.04.2019, 07:31:31
от draff