Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 8 Ответов
  • 4124 Просмотров
*

Iriska :)

  • Захожу иногда
  • 58
  • 1 / 0
Посмотрела статистику по своему сайту в Google и нашла массу неприятных вещей (самые неприятные вынесены в заголовок темы): 309 повторяющихся метаописаний, 286 повторяющихся заголовков.

Метаописания в основном связаны с /component/ и /forum/ - их я планирую закрыть от индексации в robots.txt. Но также есть одинаковые метаописания следующего плана (дублирующиеся ссылки):
http://site.ru/spravochnik/articles/72-statya.html
http://site.ru/spravochnik/articles/72.html
(и к другим статьям то же самое).
И почему-то здесь: /contacts.html

Повторяющиеся заголовки тоже из той оперы:
http://site.ru/vitrina/detskoe/-46.html
http://site.ru/vitrina/detskoe/detskoe/-46.html

Или:
/user/new/userprofile/Виола.html
/user/new/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=categoryASC
/user/new/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=categoryDESC
/user/new/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=dateASC
/user/new/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=hitsASC
/user/new/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=hitsDESC
/user/new/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=subjectASC
/user/new/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=subjectDESC
/user/new/userprofile/Виола.html?tab=getforumtab
/user/search/userprofile/Виола.html
/user/search/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=categoryASC
/user/search/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=dateASC
/user/search/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=hitsDESC
/user/search/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=subjectASC
/user/userprofile/Виола.html
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=categoryASC
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=categoryDESC
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=dateASC
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=hitsASC
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=hitsDESC
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=subjectASC
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=subjectDESC
/user/userprofile/Виола.html?tab=getforumtab

Как можно от этого избавиться, не закрывая профили пользователей и витрину от индексации?
« Последнее редактирование: 21.10.2011, 19:37:01 от Iriska :) »
*

Efanych

  • Глобальный модератор
  • 4683
  • 644 / 0
  • Меняю свою жизнь на 360°!
Создание сайтов, шаблонов, помощь в решении проблем.
*

Iriska :)

  • Захожу иногда
  • 58
  • 1 / 0
Спасибо, буду пробовать! Надеюсь, не снесу все своими упражнениями :)
Еще вопрос... Есть категории фотографий, в них фото, например: http://ladoshki.uz/vitrina/detskoe/detskaya-bijuteriya/detskaya-bijuteriya/--40.html
В заголовке выводится Фотоальбом: детская бижутерия - название фото
И так к каждой фотографии. Т.е., получается, что заголовки страниц фотографий в определенной категории - одинаковые. Это можно как-то убрать?
*

Efanych

  • Глобальный модератор
  • 4683
  • 644 / 0
  • Меняю свою жизнь на 360°!
Цитировать
В заголовке выводится Фотоальбом: детская бижутерия - название фото
Я вас не понимаю.  Называйте фотки по разному.
Создание сайтов, шаблонов, помощь в решении проблем.
*

Iriska :)

  • Захожу иногда
  • 58
  • 1 / 0
Я вас не понимаю.  Называйте фотки по разному.
А "Фотоальбом: детская бижутерия" - это разве не заголовок?
*

Iriska :)

  • Захожу иногда
  • 58
  • 1 / 0
Попробовала решение, предложенное выше - дубли статей дубли главной исчезли!
А вот такое осталось:
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=categoryASC
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=categoryDESC
/user/userprofile/Виола.html?tab=getforumtab&simpleboardtabfposts_sortby=dateASC

Как вы думаете, если я в robots.txt внесу Disallow: /*.html?tab= - это безобразие не будет индексироваться и проблема дублей в глазах поисковиков устранится? Или нужны какие-то другие варианты?

Также остаются дубли страниц такого вида:
http://ladoshki.uz/vitrina/detskoe/detskaya-bijuteriya/detskaya-bijuteriya/--40.html
http://ladoshki.uz/vitrina/detskaya-bijuteriya/--40.html
Это как-то можно устранить? Кстати, не пойму, почему название подкатегории(detskaya-bijuteriya) отображается дважды? то же самое для других подкатегорий из Детского...

Также сохранятся некоторые повторяющиеся метаописания - я так понимаю, поисковик просто берет глобальное метаописание и применяет его к разделам. Вот примеры:
/anons.html
/anons/konkurs.html
/anons/news.html
/anons/obuchenie.html
/contacts.html
/forum/rules.html
/forum/search.html
Прописать вручную отдельные метаописания не могу - нет соответствующих полей в админке. Форум, допустим, могу закрыть в robots.txt. То же самое сделала с /components/ А вот что делать с остальным?
« Последнее редактирование: 24.04.2011, 22:41:07 от Iriska :) »
*

Efanych

  • Глобальный модератор
  • 4683
  • 644 / 0
  • Меняю свою жизнь на 360°!
Цитировать
Также остаются дубли страниц такого вида:
http://ladoshki.uz/vitrina/detskoe/detskaya-bijuteriya/detskaya-bijuteriya/--40.html
http://ladoshki.uz/vitrina/detskaya-bijuteriya/--40.html
Вроде все дубли четко убирает.
А это у вас тоже com_content? Или вы просто другой компонент используете,
Создание сайтов, шаблонов, помощь в решении проблем.
*

Iriska :)

  • Захожу иногда
  • 58
  • 1 / 0
Вроде все дубли четко убирает.
А это у вас тоже com_content? Или вы просто другой компонент используете,
Полагаю, что другой компонент... знать бы еще, какой и что туда писать :)))

Посмотрела свои папки - кажется, это папка com_joomgallery
Теперь вопрос, какой файл в ней менять и что туда писать? Как вариант, вот это:/com_joomgallery/views/category/tmpl/default.php - но я не уверена. да и код какой вносить - тем более...
« Последнее редактирование: 24.04.2011, 23:12:02 от Iriska :) »
*

Efanych

  • Глобальный модератор
  • 4683
  • 644 / 0
  • Меняю свою жизнь на 360°!
Это к автору той статьи вопросы :)
Создание сайтов, шаблонов, помощь в решении проблем.
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Дублирование h-заголовков на странице: оно есть или его нет, как точно узнать?

Автор submaster

Ответов: 3
Просмотров: 1605
Последний ответ 01.10.2016, 15:28:49
от dmitry_stas
Как исправить индексацию заголовков?

Автор Kingsman

Ответов: 1
Просмотров: 1096
Последний ответ 01.03.2015, 18:00:41
от voland
Много заголовков h1 в категории что за это будет

Автор guloc55

Ответов: 3
Просмотров: 1646
Последний ответ 12.01.2013, 15:57:11
от NortonFox
Как избежать повторяющихся ссылок?

Автор kvrkin

Ответов: 5
Просмотров: 4287
Последний ответ 23.02.2008, 15:38:51
от penstyle