Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 12 Ответов
  • 2262 Просмотров
*

Roberta

  • Захожу иногда
  • 182
  • 0 / 0
Подскажите. Пытаюсь перенести сайт с поддомена на домен. На домене уже установлена Joomla
первое, что сделала закачала все файлы(сайт) на новый домен, после этого сделала экспорт базы с поддомена. вошла в базу домена и при попытке сделать импорт:

Ошибка
SQL-запрос:

-- -- Дамп данных таблицы `jos_banner` -- INSERT INTO `jos_banner` (`bid`, `cid`, `type`, `name`, `alias`, `imptotal`, `impmade`, `clicks`, `imageurl`, `clickurl`, `date`, `showBanner`, `checked_out`, `checked_out_time`, `editor`, `custombannercode`, `catid`, `description`, `sticky`, `ordering`, `publish_up`, `publish_down`, `tags`, `params`) VALUES (1, 1,...................    и т.д.

#1062 - Duplicate entry '1' for key 'PRIMARY'

В чем может быть проблема??
*

SmokerMan

  • Гуру
  • 5290
  • 720 / 26
Re: ошибка импорта базы днных
« Ответ #1 : 18.11.2010, 13:34:21 »
В чем может быть проблема??
в том что такая запись в таблице уже существует.
Удаляйте таблицу (а лучше сразу всю базу) делайте дамп и импортируйте всю базу.
*

Roberta

  • Захожу иногда
  • 182
  • 0 / 0
Re: ошибка импорта базы днных
« Ответ #2 : 18.11.2010, 14:33:55 »
спасибо, попробую
*

Roberta

  • Захожу иногда
  • 182
  • 0 / 0
Re: ошибка импорта базы днных
« Ответ #3 : 18.11.2010, 15:55:30 »
попробовала, удалили табоицу БД, импортировала новую, теперь белый экран

*

Infosakh

  • Завсегдатай
  • 1257
  • 67 / 0
Re: ошибка импорта базы днных
« Ответ #4 : 18.11.2010, 15:59:45 »
теперь подождите  ^-^ возможно все получится, если не получится смотрите время выполнения скрипта сколько стоит, возможно времени не хватает
*

Roberta

  • Захожу иногда
  • 182
  • 0 / 0
Re: ошибка импорта базы днных
« Ответ #5 : 18.11.2010, 16:45:35 »
а где смотреть время выполнения скрипта и как исправить
*

flyingspook

  • Живу я здесь
  • 3590
  • 247 / 9
Re: ошибка импорта базы днных
« Ответ #6 : 18.11.2010, 16:50:42 »
как импортируешь
попробуй все расширения
если денвер стоит он может зип архив не брать
gzip архив берет в 99%
для sql таблицы без архива как сказали время жизни сессии смотри
gzip архив и не должно быть проблем
*

Roberta

  • Захожу иногда
  • 182
  • 0 / 0
Re: ошибка импорта базы днных
« Ответ #7 : 18.11.2010, 17:10:41 »
сейчас попробовала вообще не архивировать - белый экран, при этом в админке контент перенесся
но я ничего не изменяла в conphigurtation.php
*

Roberta

  • Захожу иногда
  • 182
  • 0 / 0
Re: ошибка импорта базы днных
« Ответ #8 : 18.11.2010, 17:59:49 »
если архивировать - результат тот же белый экран

как исправить?? :(
*

Infosakh

  • Завсегдатай
  • 1257
  • 67 / 0
Re: ошибка импорта базы днных
« Ответ #9 : 19.11.2010, 06:46:01 »
время выполнения скрипта по умолчанию 60 сек, у хостера спросите/попросите увеличить время, или же сами, если есть такая возможность у хостинга. Можете также у хостера спросить логи, что происходит, какие ошибки. ^-^
*

jem777

  • Завсегдатай
  • 1666
  • 119 / 2
Re: ошибка импорта базы днных
« Ответ #10 : 19.11.2010, 08:24:47 »
Для импортов базы данных пользуйтесь Sypex Dumper. phpMyAdmin  прочие не умеют толком работать с базами обьемом больше 10 Мб.
*

Roberta

  • Захожу иногда
  • 182
  • 0 / 0
Re: ошибка импорта базы днных
« Ответ #11 : 20.11.2010, 11:28:05 »
на сегодняшний момент проблема в следующем. Сейчас не открываются(белый экран) оба сайта тот который надо перенести и тот который куда переносим.
при этом в админке оба сайта есть (то есть меню, контент)
Почему исчез первых - не понятно
Как найти ошибку??
может попробовать закачать только базу данных?

И есть ли смысл пытаться переносить сайт, если он не показывается

помогите
*

Roberta

  • Захожу иногда
  • 182
  • 0 / 0
Re: ошибка импорта базы днных
« Ответ #12 : 20.11.2010, 12:27:48 »
добавила в файл htaccess строки для показа ошибок

php_flag display_errors on
php_value error_reporting 2047

в результате выдал ошибки:

Warning: require_once(/www/groupele/www/htdocs/plugins/content/../../components/com_virtuemart/virtuemart_parser.php) [function.require-once]: failed to open stream: No such file or directory in /www/groupele/www/htdocs/plugins/content/vmproductsnapshots.php on line 42

Fatal error: require_once() [function.require]: Failed opening required '/www/groupele/www/htdocs/plugins/content/../../components/com_virtuemart/virtuemart_parser.php' (include_path='.:/usr/local/php5/share/pear') in /www/groupele/www/htdocs/plugins/content/vmproductsnapshots.php on line 42

virtuemart у меня удален, это просто сайт. где нужно удалить этот запрос к файлу, откуда идет обращение?

всем спасибо РЕШЕНО, подчистила базу данных, удалила 3 строки с virtue mart

« Последнее редактирование: 20.11.2010, 12:52:36 от Roberta »
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

simpleform2 ошибка ajax error в Google chrome

Автор safronoff343

Ответов: 1
Просмотров: 1259
Последний ответ 05.06.2020, 20:36:42
от safronoff343
Ошибка #1050 при переносе базы данных на хостинг

Автор Ksen

Ответов: 7
Просмотров: 24922
Последний ответ 16.03.2020, 17:47:29
от Petrovich
При попытке войти в админку 404 ошибка компонента

Автор omezik

Ответов: 4
Просмотров: 2899
Последний ответ 31.08.2019, 22:41:46
от Taatshi
Ошибка в компоненте CKForms

Автор Vas80

Ответов: 9
Просмотров: 1743
Последний ответ 22.04.2019, 13:34:48
от sivers
Ошибка Fatal error: Allowed memory size of 73400320 bytes exhausted

Автор Andre109

Ответов: 1
Просмотров: 2172
Последний ответ 03.12.2018, 01:29:56
от voland