Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 12 Ответов
  • 1079 Просмотров
*

volkov2000

  • Осваиваюсь на форуме
  • 24
  • 0 / 1
товарищи, извините что влажу в вашу беседу, но если по теме, то может подумать над реализацией хорошего компонента для публикации новостей с других сайтов, очень актуально. есть конечно всякие попытки, но сделать с записью в базу данных как отдельный джумловский-материал, чтобы можно было править, не нашел.
может всетаки уже что то подобное реализовано, подскажите что...
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
Не, не извиним. Может еще дорвей закажите?
*

volkov2000

  • Осваиваюсь на форуме
  • 24
  • 0 / 1
Не, не извиним. Может еще дорвей закажите?
я не заказываю, если не заметил то тема "Какой компонент нужен? Чего нехватает вам в Joomla?"

вот я и написал чего не хватает и что нужно!
*

Shustry

  • Гуру
  • 6434
  • 745 / 3
volkov2000, на самом деле написать граббер несложно и даже мне под силу. Но по-этическим соображениям сделать это не могу. И вам не советую. Нехорошо это.
*

volkov2000

  • Осваиваюсь на форуме
  • 24
  • 0 / 1
volkov2000, на самом деле написать граббер несложно и даже мне под силу. Но по-этическим соображениям сделать это не могу. И вам не советую. Нехорошо это.

с этикой все хорошо, это официальный ресурс, и договоренность есть использовать их контент с использованием ссылки на их ресурс
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
с этикой все хорошо, это официальный ресурс, и договоренность есть использовать их контент с использованием ссылки на их ресурс
Ну и договоритесь использовать доступ к БД, какие тогда проблемы то?
*

volkov2000

  • Осваиваюсь на форуме
  • 24
  • 0 / 1
Ну и договоритесь использовать доступ к БД, какие тогда проблемы то?
они не против чтобы их материал использовали у нас на сайте, а кто же доступ дает на своей ресурс ))
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
Все дают, даже когда речь о мелких работах. Так что не надо тут блаблабла.
*

volkov2000

  • Осваиваюсь на форуме
  • 24
  • 0 / 1
Все дают, даже когда речь о мелких работах. Так что не надо тут блаблабла.
Яндекс, не против размещения их новостей у себя на сайте, но с обязательной ссылкой на их ресурс, попроси у них пароль к их БД )))
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
Яндекс не имеет новостного отдела, он агрегирует новости с других сайтов.
Если надо контакты их менеджеров для переговоров - могу подсказать.
*

Shustry

  • Гуру
  • 6434
  • 745 / 3
Яндекс, не против размещения их новостей у себя на сайте, но с обязательной ссылкой на их ресурс, попроси у них пароль к их БД )))
http://legal.yandex.ru/rules/ Пункт 6.1
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
*

Shustry

  • Гуру
  • 6434
  • 745 / 3
И не лень читать было?
Но тут скорее пункт 6.2
Помнишь года два назад подымал тему о правах на телепрограмму? Вот с тех пор и помню этот документ.
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться