Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 19 Ответов
  • 14072 Просмотров
*

belguy

  • Новичок
  • 7
  • 0 / 0
Требуется расширение, чтобы можно было ежедневно просматривать с каких IP адресов были посетители на сайте.
Или может можно это как-то отследить другими способама. Если кто-то знает, то буду признателен за помощь.
*

wd

  • Давно я тут
  • 538
  • 17 / 1
  • Просто юзер
Расширения для Joomla - не рекомендую, такие будут грузить сервер.
Можно воспользоваться аналитическими сайтами.
Например, Spylog, LiveInternet, Google Analytics - посмотри, есть ли в них требуемая возможность. В Google точно знаю - определяются хосты, с которых были переходы... а вот IP пользователей там не нашёл.
*

SmokerMan

  • Гуру
  • 5290
  • 720 / 26
Расширения для Joomla - не рекомендую, такие будут грузить сервер.
:)
в PHP есть такая переменная как $_SERVER['REMOTE_ADDR'], если нужно записать в БД, то от одного запроса никто не умирал.
*

belguy

  • Новичок
  • 7
  • 0 / 0
В аналитических системах города только дает. нужны IP адреса.
В php не разбираюсь, к сожалению.
*

Восток

  • Осваиваюсь на форуме
  • 10
  • 0 / 0
:)
в PHP есть такая переменная как $_SERVER['REMOTE_ADDR'], если нужно записать в БД, то от одного запроса никто не умирал.
Как это сделать объясни,будь добр?!
*

Dorfman

  • Завсегдатай
  • 1202
  • 78 / 4
  • Почти влез...
Если каждый визит записывать в БД, то через пару-тройку месяцев БД одними роботами "распухнет"... Придётся регулярно чистить
*

Taatshi

  • Гуру
  • 5258
  • 481 / 2
  • Верстаем и кодим. Обращайтесь ;)
Просто смотрите логи посещений вашего сайта на хостинге))) И зачем вам именно айпишники? Вы уточнитесь, пожалуйста.

ВЕРСТКА, САЙТЫ ПОД КЛЮЧ, УДАЛЕНИЕ ВИРУСОВ, МИГРАЦИЯ НА JOOMLA 3, ОБНОВЛЕНИЕ  |  ОТЗЫВЫ 
Связь: telegram - Taatshi, почта - Taatshi на яндексе, Skype - Taatshi
*

ChaosHead

  • Гуру
  • 5242
  • 451 / 13
JoomlaStats это расширение. http://www.joomlastats.org/
*

Dorfman

  • Завсегдатай
  • 1202
  • 78 / 4
  • Почти влез...
JoomlaStats это расширение. http://www.joomlastats.org/

Вот после этого расширения у меня база и "опухла" на 80 метров за полгода! Ну его на...
Разве что поставить, понаблюдать и удалить... Да ещё и с кодировками там какие-то проблемы были... Помню, с неделю возюкался, пока результата добился.

ЗЫ Хотя, смотрю на офсайте - у меня была более древняя версия. Кто поставил - отпишитесь, как работает, плз!
« Последнее редактирование: 08.08.2011, 12:22:00 от Dorfman »
*

ChaosHead

  • Гуру
  • 5242
  • 451 / 13
2 года работает, версия последняя. А что такого страшного в 80 мегабайтах при современных размерах жестких дисков? И вроде там что-то типа свёртки старых результатов можно делать, если они не нужны уже.
*

Dorfman

  • Завсегдатай
  • 1202
  • 78 / 4
  • Почти влез...
А что такого страшного в 80 мегабайтах при современных размерах жестких дисков?

Был бы это просто файл - ладно, а так - база...

И вроде там что-то типа свёртки старых результатов можно делать, если они не нужны уже.

Хе... Вот этого-то в старой версии мне и не хватало. А как с кракозябрами? Проблема уже решена?
*

ChaosHead

  • Гуру
  • 5242
  • 451 / 13
Я не знаю, у меня не появлялось ничего подобного.
*

shah

  • Захожу иногда
  • 56
  • 1 / 0
Требуется расширение, чтобы можно было ежедневно просматривать с каких IP адресов были посетители на сайте.
Или может можно это как-то отследить другими способама. Если кто-то знает, то буду признателен за помощь.
JoomlaWatch 1.2.9
*

Dorfman

  • Завсегдатай
  • 1202
  • 78 / 4
  • Почти влез...
JoomlaWatch 1.2.9

Вот, блин, перепутал я! Это после JoomlaWatch 1.2.9, а не joomlastats, у меня база опухала и траблы с кодировками были! Заюзаю, попробую.
*

NiBoh

  • Новичок
  • 4
  • 0 / 0
Не подскажите, почему Joomlastats 3.0.0 не определяет страну некоторых посетителей? Главное в WHOIS все видно и страну, и город, а в статистике у посетителя страна неизвестно,  ДВУ - .unknown. США еще ни разу не определила, Австралию..., а вот Латвию один IP определяет, а другой нет.
*

roket007

  • Захожу иногда
  • 113
  • 8 / 0
К слову про распухание базы! Было бы логичнее записывать IP не в базу данных, а в файл. Тогда и проблем не возникнет!
*

ChaosHead

  • Гуру
  • 5242
  • 451 / 13
Вот когда у вас будет файл большого размера - это вас не смущает, а когда база - смущает? Только ещё раз повторяю, с Joomlastats база не распухает.
А то, что она страны не определяет - это вероятно у неё неполная база привязок IP к странам.
*

NiBoh

  • Новичок
  • 4
  • 0 / 0
а как ее пополнить, базу эту?
*

roket007

  • Захожу иногда
  • 113
  • 8 / 0
Вот когда у вас будет файл большого размера - это вас не смущает, а когда база - смущает? Только ещё раз повторяю, с Joomlastats база не распухает.
А то, что она страны не определяет - это вероятно у неё неполная база привязок IP к странам.
Ну я исходя из тех соображений, что на платных хостах, под базу выделяется место отдельно и зачастую оно меньше чем место для хранения файлов сайта. К примеру видел, что для гигового хоста выделено 100мб под базу mysql. Ну возможно я не верно понял.
*

asilbeko

  • Захожу иногда
  • 187
  • 2 / 0
  • чуваааккк!
а как вам скрипт bbclone? (от Никифоров С.В. aka ShadowXak)
тут можете посмотреть его работу: http://www.shadowxak.ru/bbclone
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Автоматическое определение локации посетителя сайта

Автор Alex_iPod

Ответов: 0
Просмотров: 2157
Последний ответ 03.08.2023, 10:05:42
от Alex_iPod
Плагин для кросспостинга с сайта в Фэйсбук

Автор Mickey

Ответов: 0
Просмотров: 2050
Последний ответ 20.04.2023, 18:30:19
от Mickey
Компонент форма обратной связи или анкета для пользователей сайта

Автор disig

Ответов: 14
Просмотров: 2287
Последний ответ 01.07.2021, 03:35:15
от disig
Платный доступ к разделам сайта

Автор qualin_rosg

Ответов: 0
Просмотров: 794
Последний ответ 05.04.2021, 22:41:38
от qualin_rosg
Модуль для добавления материала с лицевой части сайта на двух языках сразу

Автор Toxa1

Ответов: 1
Просмотров: 877
Последний ответ 12.12.2020, 19:51:24
от AdWeb