Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 13 Ответов
  • 1224 Просмотров
*

misteri27

  • Захожу иногда
  • 490
  • 0 / 0
Всем привет.
Народ как заставить выдавать 404 ошибку если страницы с такой пагинацией нету? А то у меня если ввести число например catalog/ip-videonablyudenie?start=3080 просто показывает первую страницу и ответ сервера 200. А нужно 404 . Пытался искать по форуму не нашел.

Решено.
В файле \components\com_jshopping\templates\мой шаблон\list_products\list_products.php добавил такую конструкцию с выводом в тайтле и дескрипшине номера страницы товара и при несуществующей странице ?start=хххх выдает 404
Цитировать
<?php
$limit = JRequest::getInt('limitstart',0);
if ($limit > 0){
$document = & JFactory::getDocument();
$mytitle = $document->getTitle();
$desc = $document->getMetadata('description');

$selector = $this->product_count;
preg_match('|"selected">(\d*)|sei', $selector, $arr);

$numpage =  $limit / $arr[1] +1;
$titletext =' - страница '.$numpage;

$document->setTitle($mytitle.$titletext);
$document->setMetadata('description', $desc.$titletext);

}?>   
<?php if($limit > 0 && $this->pagination_obj->pagesCurrent == 1){
exit(header('Location: /error404/'));}
?>
« Последнее редактирование: 29.05.2020, 10:41:30 от misteri27 »
*

nevigen

  • Moderator
  • 10451
  • 863 / 25
  • http://n*****n.com
Профессиональные / Бесплатные решения для JoomShopping
Не лечи бесплатно, ибо тот, кто лечится бесплатно, рано или поздно перестает ценить свое здоровье,
а тот, кто лечит бесплатно, рано или поздно перестает ценить результаты своего труда/ (с) Гиппократ?
Не ищите ответов, ищите решение !
*

misteri27

  • Захожу иногда
  • 490
  • 0 / 0
зачем ?
Плохо для поисковиков :) Сказали сеошники
Короче задача что быесли нету такой страницы ответ сервера был либо 404 либо на крайняк 301 на первую страницу
*

gartes

  • Завсегдатай
  • 1859
  • 142 / 6
  • Е = mс²
Цитировать
Плохо для поисковиков :) Сказали сеошники
Но завтра Они тебе скажут пойди Ударься головой в стенку и ты это сделаешь ?
А вообще ну это интересная тема Я не дам ей засохнуть вот сейчас поговорим Ну чуть попозже
*

sivers

  • Живу я здесь
  • 2596
  • 360 / 0
Плохо для поисковиков :) Сказали сеошники
Если сеошников не устраивает только этот параметр, то надо ставить сравнение значения этого параметра и total (общее кол-во товаров). В принципе, это можно сделать в любом месте, где доступен параметр total для списка объектов. Это могут быть:
Модель или представление (если компонент кастомный и позволяет править модель или представление)
Макет страницы списка
Макет пагинации
Делаете условие и генерите 404, если start > total

А если сеошников не устраивают вообще любые левые параметры после ? (а Joomla с ними прекрасно работает), то подход должен быть другим. Тогда вам надо либо нормально настраивать роутер, чтоб параметров не было (а при их наличии сразу генерить 404). Либо проверять все параметры и, при наличии левых параметров или значений, генерить 404.
На связи в telegram @sivers
sivers @ inbox . ru
https://sivers.su/
*

nevigen

  • Moderator
  • 10451
  • 863 / 25
  • http://n*****n.com
Плохо для поисковиков :) Сказали сеошники
Короче задача что быесли нету такой страницы ответ сервера был либо 404 либо на крайняк 301 на первую страницу
если сеошники научат ботов прописывать леваки в ссылках при обходе то конечно не вопрос !
их можно слушать...
но если только он 1 может попасть на эут старницу можете выписать им премию, что они нашли секретплейс и пусть идут с богом !
очень сомневаюсь что вас есть эти страницы в индексе.
Профессиональные / Бесплатные решения для JoomShopping
Не лечи бесплатно, ибо тот, кто лечится бесплатно, рано или поздно перестает ценить свое здоровье,
а тот, кто лечит бесплатно, рано или поздно перестает ценить результаты своего труда/ (с) Гиппократ?
Не ищите ответов, ищите решение !
*

sivers

  • Живу я здесь
  • 2596
  • 360 / 0
очень сомневаюсь что вас есть эти страницы в индексе.
Это же пагинация. Если каталог обновляется перодически и возможно не только увеличение, но и уменьшение записей в каталоге, то и кол-во страниц какой-нибудь категории может уменьшится. А в индексе поисковика останется.
На связи в telegram @sivers
sivers @ inbox . ru
https://sivers.su/
*

nevigen

  • Moderator
  • 10451
  • 863 / 25
  • http://n*****n.com
хм...
может.
Профессиональные / Бесплатные решения для JoomShopping
Не лечи бесплатно, ибо тот, кто лечится бесплатно, рано или поздно перестает ценить свое здоровье,
а тот, кто лечит бесплатно, рано или поздно перестает ценить результаты своего труда/ (с) Гиппократ?
Не ищите ответов, ищите решение !
*

misteri27

  • Захожу иногда
  • 490
  • 0 / 0
Если сеошников не устраивает только этот параметр, то надо ставить сравнение значения этого параметра и total (общее кол-во товаров). В принципе, это можно сделать в любом месте, где доступен параметр total для списка объектов. Это могут быть:
Модель или представление (если компонент кастомный и позволяет править модель или представление)
Макет страницы списка
Макет пагинации
Делаете условие и генерите 404, если start > total

А если сеошников не устраивают вообще любые левые параметры после ? (а Joomla с ними прекрасно работает), то подход должен быть другим. Тогда вам надо либо нормально настраивать роутер, чтоб параметров не было (а при их наличии сразу генерить 404). Либо проверять все параметры и, при наличии левых параметров или значений, генерить 404.
А не могли бы конкретней сказать? Как по условию сгенерить ответ?
*

sivers

  • Живу я здесь
  • 2596
  • 360 / 0
А не могли бы конкретней сказать? Как по условию сгенерить ответ?
Отдать заголовок 404, чтоб роботы правильно понимали и прекратить вывод (будет пустая страница). Для роботов этого достаточно. Но можно вместо пустой страницы вывести ваш шаблон ошибки (по умолчанию он формируется файлом error.php в папке вашего шаблона).

С пустой страницей:
Код
header('HTTP/1.1 404 Not Found');
exit();

С выводом шаблона ошибки:
Код
header('HTTP/1.1 404 Not Found');
$_REQUEST['tmpl'] = 'error';
На связи в telegram @sivers
sivers @ inbox . ru
https://sivers.su/
*

misteri27

  • Захожу иногда
  • 490
  • 0 / 0
header('HTTP/1.1 404 Not Found');
exit();
header('HTTP/1.1 404 Not Found');
$_REQUEST['tmpl'] = 'error';
Обе у меня не сработали. Вторая выдавала ошибку.
Вызов страницы ошибки получился
Код
<?php
exit(header('Location: /error404/'));
?>
А вот как сделать проверку start > total ?
*

sivers

  • Живу я здесь
  • 2596
  • 360 / 0
Обе у меня не сработали. Вторая выдавала ошибку.
Вызов страницы ошибки получился
Как именно не сработали?

Они обе предназначены для выдачи ответа ошибки 404. Но первая с белым экраном, а вторая с текстом страницы ошибки.

<?php
exit(header('Location: /error404/'));
?>
Это не совсем правильное решение. Потому что тут происходит редирект на страницу ошибки с изменением URL в адресной строке.
А вот как сделать проверку start > total ?
Эту проверку можно сделать либо в модуле компонента (например, в методе getTotal), либо в другом месте, в котором доступен пагинатор - это либо view компонента, либо макет вывода списка объектов. Вам какой вариант лучше подойдет?
На связи в telegram @sivers
sivers @ inbox . ru
https://sivers.su/
*

misteri27

  • Захожу иногда
  • 490
  • 0 / 0
Как именно не сработали?

Они обе предназначены для выдачи ответа ошибки 404. Но первая с белым экраном, а вторая с текстом страницы ошибки.
Это не совсем правильное решение. Потому что тут происходит редирект на страницу ошибки с изменением URL в адресной строке.Эту проверку можно сделать либо в модуле компонента (например, в методе getTotal), либо в другом месте, в котором доступен пагинатор - это либо view компонента, либо макет вывода списка объектов. Вам какой вариант лучше подойдет?

Я хотел это вставить в list_products.php там же сейчас и вывод в тайтл страницы и описания реализовано.
Код
<?php
$limit = JRequest::getInt('limitstart',0);
if ($limit > 0){
$document = & JFactory::getDocument();
$mytitle = $document->getTitle();
$desc = $document->getMetadata('description');

$selector = $this->product_count;
preg_match('|"selected">(\d*)|sei', $selector, $arr);

$numpage =  $limit / $arr[1] +1;
$titletext =' - страница '.$numpage;

$document->setTitle($mytitle.$titletext);
$document->setMetadata('description', $desc.$titletext);

}?>
Цитировать
Это не совсем правильное решение. Потому что тут происходит редирект на страницу ошибки с изменением URL в адресной строке.
Мне в принципе пойдет редирект на 404
*

sivers

  • Живу я здесь
  • 2596
  • 360 / 0
Я хотел это вставить в list_products.php там же сейчас и вывод в тайтл страницы и описания реализовано.
Сами переписывали это?
Смысловое значение переменной $limit перепутано. Но да ладно.

Проверьте, должнен работать один из двух вариантов (или оба):
Код
if($limit > 0 && $this->pagination_obj->pagesCurrent == 1){
   ...
}

и второй вариант:
Код
if($limit > $this->pagination_obj->pagesTotal){
   ...
}
На связи в telegram @sivers
sivers @ inbox . ru
https://sivers.su/
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться