Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 12 Ответов
  • 1858 Просмотров
*

autokaif

  • Захожу иногда
  • 81
  • 0 / 0
Перенос БД с Joomla 3 на Joomla 4
« : 20.11.2022, 17:36:00 »
Здравствуйте Уважаемые форумчане!
Установил Joomla_4.2.5

Переношу БД частями из Joomla 3.10.11, а именно таблицы:
_assets (изменил начальный ID Autoincrement, чтоб избежать ошибок при импорте)
_categories
_ content - удалил лишний столбец xreference (которого нет в Joomla 4)
_content_frontpage
_menu
_menu_types
_tag_map
_tags
_ucm_base
_ucm_content -  удалил лишний столбец  core_xreference (которого нет в Joomla 4)

Импорты прошли без ошибок.
В админке, видны категории. Материалов совсем нет! В БД ВСЕ ЕСТЬ.

Пробовал пересохранять категории, перестраивать, оптимизировать БД из самой Joomla. Делал новый пункт
меню на главную страницу, ковырял базовый шаблон. Всего и не вспомню уже. Полностью себя исчерпал.

Наткнулся на инфу, что Joomla 4 появились новые таблицы
_workflows
_workflow_associations
_workflow_stages
_workflow_transitions
Они у меня пустые.

Подскажите Пожалуйста, что делаю не так.
Хочется перенести саму БД на новый движ.
Заранее Благодарю!
« Последнее редактирование: 20.11.2022, 20:51:19 от autokaif »
*

marksetter

  • Завсегдатай
  • 1045
  • 40 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #1 : 20.11.2022, 18:23:27 »
а апдейтом с 3 не выходит?
да и таблицы не все переносите
попробуйте через cfi
индивидуальная помощь: @SetAlexx
*

autokaif

  • Захожу иногда
  • 81
  • 0 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #2 : 20.11.2022, 19:03:24 »
а апдейтом с 3 не выходит?
да и таблицы не все переносите
попробуйте через cfi
Спасибо за наводку. Хочется сделать руками, так и понимания будет больше. Каких не хватает таблиц?
*

marksetter

  • Завсегдатай
  • 1045
  • 40 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #3 : 20.11.2022, 19:13:35 »
все что с контентом свчзаны и с категориями
увы точно сказать смогу только 9автра
индивидуальная помощь: @SetAlexx
*

autokaif

  • Захожу иногда
  • 81
  • 0 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #4 : 20.11.2022, 19:35:52 »
все что с контентом свчзаны и с категориями
увы точно сказать смогу только 9автра
Спасибо! Буду благодарен
*

marksetter

  • Завсегдатай
  • 1045
  • 40 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #5 : 20.11.2022, 20:01:01 »
по факту сами смотрите
контент, категории, далее уже ьыли ли поля, теги и прочее
индивидуальная помощь: @SetAlexx
*

autokaif

  • Захожу иногда
  • 81
  • 0 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #6 : 20.11.2022, 20:50:11 »
по факту сами смотрите
контент, категории, далее уже ьыли ли поля, теги и прочее
[/quote
по факту сами смотрите
контент, категории, далее уже ьыли ли поля, теги и прочее
Контент, категории и поля перенесены! Чего же тогда не хватает?
*

marksetter

  • Завсегдатай
  • 1045
  • 40 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #7 : 20.11.2022, 21:17:47 »
по вашему посту не все
индивидуальная помощь: @SetAlexx
*

autokaif

  • Захожу иногда
  • 81
  • 0 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #8 : 20.11.2022, 22:34:52 »
И так ... Благодаря подсказке sivers в соседней ветке, попытался отредактировать материал за счет конструкции /administrator/index.php?option=com_content&task=article.edit&id=4

При том, что в админ панели материалов вообще нет! Статья открылась на редактирование! Просто сохранил и материал появился на главной! После сравнил появившийся с соседним в phpMyAdmin, а затем экспортировал оба и сравнил в текстовом редакторе.

Разница в столбике publish_down таблицы content!  У появившегося материала в phpMyAdmin gеред этим полем есть галочка, ставишь ее, и эта дата с временем пропадают, после сохранения, материал появляется на главной странице. В импортированной базе от Joomla 3, там стоят 0000-00-00 00:00:00.

В текстовом редакторе, у появившегося материала стоит NULL! А у остальных вышеуказанная дата и время!
Получается, надо попробовать записать NULL в весь столбик  publish_down таблицы content.

Сбросил через SQL в PhpMyAdmin значения столбца publish_down таблицы content на значение NULL.
Все Материалы теперь видны на главной! И ВСЕ НЕ В СВОЕЙ КАТЕГОРИИ А В Uncategorised. А в админ панели их нет!

UPD!
Обновился с 3-ки на 4-ку. Сравнил таблицу категории например. На 3-ке стоят в столбцах checked_out и checked_out_time стоят 0 и 0000-00-00 00:00:00, а в обновленном до 4-ки варианте NULL в обоих столбцах.
Есть еще изменения, осталось проверить, из за них ли не показывает контент на главной и материал в админке.
« Последнее редактирование: 28.11.2022, 20:09:22 от autokaif »
*

AlViKo

  • Новичок
  • 6
  • 0 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #9 : 01.12.2022, 00:07:37 »
Я пришёл к выводу, что надо делать миграцию (либо с VPN, либо, скачав через VPN), предварительно удалив всё, что не от Joomla,  потом установив всё, что нужно.
« Последнее редактирование: 28.12.2022, 22:59:05 от AlViKo »
*

AlViKo

  • Новичок
  • 6
  • 0 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #10 : 12.12.2022, 20:31:23 »
Я пришёл к выводу, что надо делать миграцию (либо с VPN, либо, скачав через VPN), предварительно удалив всё, что не от Joomla,  потом установив всё, что нужно.
« Последнее редактирование: 28.12.2022, 22:59:32 от AlViKo »
*

sivers

  • Живу я здесь
  • 2596
  • 360 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #11 : 12.12.2022, 21:17:53 »
Практически при любой вставки № id (у Вас 4, например) появляется надпись
это если менять ИД в адресной строке. Потому что там ссылка меняется (вместо task становится layout). Копируйте ссылку из списка материалов и подставляйте ид в нее. Присмотритесь внимательней.
На связи в telegram @sivers
sivers @ inbox . ru
https://sivers.su/
*

AlViKo

  • Новичок
  • 6
  • 0 / 0
Re: Перенос БД с Joomla 3 на Joomla 4
« Ответ #12 : 17.12.2022, 18:27:11 »
Копируйте ссылку из списка материалов и подставляйте ид в нее.
Спасибо за ответ. Удачи!
« Последнее редактирование: 28.12.2022, 22:59:57 от AlViKo »
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Журнал о Joomla от NorrNext. Выпуск в честь 20-ти летия Joomla. Интервью

Автор Sulpher

Ответов: 6
Просмотров: 466
Последний ответ 01.11.2025, 00:12:24
от Sulpher
Joomla 6

Автор bormir

Ответов: 4
Просмотров: 460
Последний ответ 27.10.2025, 15:50:37
от Sulpher
RSFirewall нашел в Joomla 4 какой-то подозрительный файл

Автор web1

Ответов: 20
Просмотров: 2841
Последний ответ 18.10.2025, 20:54:25
от wishlight
Сделал шаблон для Joomla 5

Автор fbr

Ответов: 9
Просмотров: 2096
Последний ответ 15.10.2025, 16:49:33
от fbr
Как вставить видео с rutube в Joomla 5,?

Автор Северянин23

Ответов: 12
Просмотров: 3217
Последний ответ 15.08.2025, 12:45:55
от web1