Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 40 Ответов
  • 7230 Просмотров
*

varX

  • Живу я здесь
  • 2467
  • 141 / 5
  • разработка компонентов
Re: Получить id статьи
« Ответ #30 : 06.06.2012, 04:27:05 »
Цитировать
Искать по БД тэги с уже отрендереной страницы? О_о. Весьма последовательно.

А что тут сложного? Разбить переданный текст на подстроки и проверить на совпадение хотябы одной из них. Это все одним запросом делается.

Цитировать
Хотя верно подметил

Спасибо, оценил.
Разработка и ремонт. VirtueMart. JoomShopping. Свои компоненты. Принимаю заявки на plasma-web.ru.
*

varX

  • Живу я здесь
  • 2467
  • 141 / 5
  • разработка компонентов
Re: Получить id статьи
« Ответ #31 : 06.06.2012, 04:29:54 »
Цитировать
Искать по БД тэги с уже отрендереной страницы? О_о. Весьма последовательно.

А что тут сложного? Разбить переданный текст на подстроки и проверить на совпадение хотябы одной из них. Это все одним запросом делается.

Цитировать
Хотя верно подметил

Спасибо, оценил.
Разработка и ремонт. VirtueMart. JoomShopping. Свои компоненты. Принимаю заявки на plasma-web.ru.
*

ecolora

  • Завсегдатай
  • 1535
  • 171 / 2
  • творец
Re: Получить id статьи
« Ответ #32 : 06.06.2012, 07:39:43 »
id узнается вот так:

Код
$cid = JRequest::getInt( 'id', 0, 'get' ); //у главной страницы будет = 0

Но, вообще, Вы не в ту степь, по-моему полезли. Зачем Вам id страницы? Не проще узнать и указать для правки точный урл страницы?

Код
	//адрес страницы
$uri = & JURI::getInstance();
$ourl = $uri->toString();
    $url = addslashes($ourl);

Последняя строчка для вставки в базу... а вообще достаточно $ourl, если в письме отправлять будете.
Я рифме друг словесной. Тут
Свой упражняю словоблуд:
Блог Ecolora
*

ecolora

  • Завсегдатай
  • 1535
  • 171 / 2
  • творец
Re: Получить id статьи
« Ответ #33 : 06.06.2012, 07:41:59 »
ID материала страницы узнается вот так:
Код
$cid = JRequest::getInt( 'id', 0, 'get' ); //у главной страницы будет = 0

Но, по-моему, вы "не в ту степь" лезете. Зачем Вам id? Не проще ли получить точный урл страницы и его сохранять или отправлять пользователю? Вот код:

Код
//адрес страницы
$uri = & JURI::getInstance();
$ourl = $uri->toString();
    $url = addslashes($ourl);

Последняя строка для преобразования полученного значения для вставки в базу. Лучше подстраховаться. ;-)

А так-то точный урл сохранен уже в переменной $ourl
Я рифме друг словесной. Тут
Свой упражняю словоблуд:
Блог Ecolora
*

Efanych

  • Глобальный модератор
  • 4683
  • 644 / 0
  • Меняю свою жизнь на 360°!
Re: Получить id статьи
« Ответ #34 : 06.06.2012, 07:44:04 »
удалено, продублировано.
Ты что, не можеш свои посты удалять?
Создание сайтов, шаблонов, помощь в решении проблем.
*

Shustry

  • Гуру
  • 6434
  • 745 / 3
Re: Получить id статьи
« Ответ #35 : 06.06.2012, 08:04:46 »
А что тут сложного? Разбить переданный текст на подстроки и проверить на совпадение хотябы одной из них. Это все одним запросом делается.

Спасибо, оценил.
Предвидя такой ответ я привёл популярный пример. Повторюсь: а что если у клиента, например, стоит плагин для замены буквы "а" на символ "@" во всём тексте? Ну вот захотелось так вот ему. Как будем искать?
Моё решение прокомментируй пожалуйста, твоё уже очевидно, что далеко не универсально. Проще было тогда в шаблон залезти и тупо айдишники прописать, коли делать допущения какие-либо.
Ты что, не можеш свои посты удалять?

Нет.
ecolora, не, я выше написал пример, почему так не пойдёт. Конкретные материалы в УРЛе блога никак не прописаны. На новостном сайте по такому адресу могуть быть сейчас пять таки-то статей, а через час - пять других. Самое логичное как раз сделать альт.макет блога категории и там id выводить. Но тут задача стоит всё это в модуле сделать. Поэтому вот такое решение написал. ^-^
*

ecolora

  • Завсегдатай
  • 1535
  • 171 / 2
  • творец
Re: Получить id статьи
« Ответ #36 : 06.06.2012, 09:29:51 »
ecolora, не, я выше написал пример, почему так не пойдёт. Конкретные материалы в УРЛе блога никак не прописаны. На новостном сайте по такому адресу могуть быть сейчас пять таки-то статей, а через час - пять других. Самое логичное как раз сделать альт.макет блога категории и там id выводить. Но тут задача стоит всё это в модуле сделать. Поэтому вот такое решение написал. ^-^

Можно пример такого сайта? ИМХО, изначально затея глупая, отслеживать такие вот меняющиеся страницы. Их даже ПС не отследят, а Вы хотите "админить"... :-)
« Последнее редактирование: 06.06.2012, 10:04:23 от ecolora »
Я рифме друг словесной. Тут
Свой упражняю словоблуд:
Блог Ecolora
*

ecolora

  • Завсегдатай
  • 1535
  • 171 / 2
  • творец
Re: Получить id статьи
« Ответ #37 : 06.06.2012, 10:03:32 »
Я пишу модуль, с помощью которого пользователи на моём сайте могут оставить сообщение об ошибке

Коллега, для этих целей уже есть Proofreader. Странно, что никто Вам об этом не сообщил. И хоть это приложение не обновлялось уже давно, в связке с файрволом им можно пользоваться без опасения (все незакрытые переменные, если есть, файрвол закроет).

Смысл в модуле?
Я рифме друг словесной. Тут
Свой упражняю словоблуд:
Блог Ecolora
*

ecolora

  • Завсегдатай
  • 1535
  • 171 / 2
  • творец
Re: Получить id статьи
« Ответ #38 : 06.06.2012, 10:09:28 »
Подытожу переписку в этой теме.

Сугубо личное мнение. Прошу понять и не обижаться:

Я "отвечаю", что будь я разработчиком такого модуля или компонента, посылал бы всех на%уй с просьбой дать конкретно позицию ошибки на меняющейся! странице и лично я бы брал URL страницы в качестве ориентира. Для большинства страниц сайта он будет соответствовать контенту долгое время и этого достаточно, потому что ошибка может быть не только в статье, но в модуле, компоненте и т.п. Где id статьи равен или может быть равен 0!

Спасибо за внимание.

P.S.
А такие вот "меняющиеся" страницы (с меняющимся контентом) "отслеживать" - это е%анатизм.
« Последнее редактирование: 06.06.2012, 10:13:25 от ecolora »
Я рифме друг словесной. Тут
Свой упражняю словоблуд:
Блог Ecolora
*

flassya

  • Новичок
  • 8
  • 0 / 0
Re: Получить id статьи
« Ответ #39 : 07.06.2012, 09:49:04 »
Всем добрый день! :)
Ох, сколько здесь всего понаписано.
ProofReader - видела этот компонент. К сожалению, он для J1.5.
Так как модуль разрабатывается для областного новостного сайта департамента образования, то, следовательно, частота смены сообщений в среднем 10-15 новостей в день. Поэтому идея получать просто ссылку на блог отпадает сразу.
А вот мысль по поводу получения текущих статей на момент нахождения ошибки - понравилась. Попробую реализовать.

Модуль пишется в совокупности с компонентом и плагином подсветки ошибок. Дело в том, что за каждый пункт меню (грубо говоря, раздел) назначается свой ответственный. То, что находили уже готовое, не устраивало. Поэтому приняли решение писать сами.
*

ecolora

  • Завсегдатай
  • 1535
  • 171 / 2
  • творец
Re: Получить id статьи
« Ответ #40 : 07.06.2012, 10:37:24 »
А вот мысль по поводу получения текущих статей на момент нахождения ошибки - понравилась. Попробую реализовать.

Никто не говорит, что это нельзя сделать. Но обрабатывать информацию о том, что в статьях с id: 15,23,45,79,52,100,... и так 15 штук на страницу, - нужно поправить ошибку - это нормально? :-) Сочувствую корректору, который будет это искать. ИМХО, проще поиском по контенту воспользоваться, тогда зачем вообще запоминать id?

А как быть с информацией не в материалах, а в других компонентах? Как Вы там её будете обрабатывать, если URL будет неизвестен?

Повторяюсь. Для большинства страниц сайта (т.е. не блоги разделов) URL будет соответствовать контенту долгое время. Если же ошибку нашли в Блоге материалов раздела - встроенный поиск Вам поможет.

И никаких проблем.

Коллега Добрый Зайка Вам подсказал хорошее решение, но ИМХО, сама задача поставлена... зря... напрасно... подберите слово.

В любом случае УСПЕХОВ В Вашем, походу, нелегком труде!
Я рифме друг словесной. Тут
Свой упражняю словоблуд:
Блог Ecolora
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

params->get для компонента, как получить свои собственные параметры для компонента

Автор klubnichkaaa

Ответов: 13
Просмотров: 14362
Последний ответ 01.06.2017, 20:20:28
от Septdir
По ID'у пункта меню получить ссылку для перехода

Автор GRIG

Ответов: 4
Просмотров: 3126
Последний ответ 08.05.2017, 17:13:05
от Aleks.Denezh
Получить значения пагинации к примеру $this->pagination->total

Автор klubnichkaaa

Ответов: 7
Просмотров: 1715
Последний ответ 09.06.2014, 14:50:57
от klubnichkaaa
Получить параметр из url

Автор greytm

Ответов: 3
Просмотров: 1689
Последний ответ 22.05.2014, 01:41:36
от Fedor Vlasenko
Получить значение параметра плагина в js

Автор AlekVolsk

Ответов: 24
Просмотров: 2095
Последний ответ 30.04.2014, 18:13:33
от Aleks.Denezh