Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 35 Ответов
  • 7063 Просмотров
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
вот адрес: http://www.nik...com/ (адрес более недействителен). почему-то в основном индексируются только ссылки с модуля Friends. кто какие может дать советы по поводу поисковой оптимизации?

карта сайта (Xmap 1.2.восемь) присутствует.
версия Joomla - 1.5.18.
« Последнее редактирование: 01.07.2011, 18:58:11 от ЖиВоЙ »
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
нужно ли запрещать для индексации модули в файле робота?
*

ChaosHead

  • Гуру
  • 5242
  • 451 / 13
У яндекса у вас в индексе только одна страница. И выкинул он их 11.11.2009. Все разом. Вспоминайте, что делали. Я подозреваю, что это из-за большого количества исходящих ссылок на главной странице.

Get the Flash Player  
Знакомства в Стране Знакомств
Интернет магазин одежды
Отдых на Черном море
img: http://vkontakte.ru/club13256096
img: http://guitarist.com.ua
img: http://www.hitparad.org
img: http://indimuz.org.ua
img: http://www.kuznitsa.crimea.ua
img: http://myband.com.ua
img: http://pleyada.ucoz.com
img: http://i-pro.kiev.ua
img: http://rock.cn.ua
img: http://www.rockinrivne.com
img: http://www.rock-video.net
img: http://rock.kiev.ua
img: http://www.rockzp.com.ua
img: http://myradio.com.ua
img: http://rock-ua.com
img: http://www.bike.mk.ua
img: http://colorsound.com.ua
img: http://top100.rambler.ru/home?id=1564766
img: http://www.bigmir.net/
Создание сайта

У Google пока - около 200 страниц в поиске.
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
ну вот в том вся и беда - я не знаю как их запретить для индексации. стандартными noindex не получается. они туда просто не подходят.
*

ChaosHead

  • Гуру
  • 5242
  • 451 / 13
Лучше их вообще убрать, какие можно с главной. Это и скорость загрузки сайта может тормозить тоже. Чтобе не индексировались - нужно их в тег nofollow обратить.
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
они не на главной, а в модулях. и "обратить" их не получается по одной простой причине - модуль, где расположено большинство из них, это ротатор картинок (кнопок), ведущих на дружественные сайты. если прописывать теги в настройках, то выводятся сполшные символы вместо картинок.
*

ChaosHead

  • Гуру
  • 5242
  • 451 / 13
Если вы с них деньги не получаете - сделайте их только на главной. Или ещё лучше только на отдельной страничке: "Наши друзья".
Ну это естественно вам только решать, что важнее: либо ссылки на ваших друзей, либо то, что с Яндекса к вам ни кто не переходит.
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
а что, по-другому никак? никакой плагин не поможет?
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
сделал по вашему совету, добавил в Яндекс карту Xmap, но в индексе по-прежнему 1 страница, а у Google - 14. это из 294 URL. в чём может быть проблема?
*

ChaosHead

  • Гуру
  • 5242
  • 451 / 13
Нет, в Google у вас их 4940. Из них около 460 в основном индексе. Остальные в supplemental.
Яндекс, если и вернёт страницы в поиск, то сделает это не сразу, а постепенно. В панели вебмастера Яндекса посмотрите какие ошибки есть. Чтобы исключить другие возможные причины.
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
я говорил о сумме страниц, судя по карте сайта, которую я скормил Google. а вообще я не знаю откуда он мог взять 4940 страниц - у меня нет такого количества страниц на сайте. хотя может это из-за дублей...
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
какого хрена в Joomla куча дублированных ссылок! если разработчики допускают подобные проколы, тоони просто лохи! такую очевидную вещь не суметь исправить раз и навсегда!
*

MaRt

  • Захожу иногда
  • 356
  • 20 / 2
  • SEO master
это не дубли, это особенность PHP...у вас реально дубли страниц, очень поъоже на то, что кривая сборка
Тра та та
*

ChaosHead

  • Гуру
  • 5242
  • 451 / 13
И же тоже допускаете, чтобы сайт открывался как http://nikrock.com/ и http://www.nikrock.com/
а это уже два разных сайта.
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
зайти можно по двум адресам и это один и тот же сайт. как можно выпрямить кривую сборку?
*

profiX0808

  • Захожу иногда
  • 497
  • 70 / 0
http://joomlaforum.ru/index.php/topic,82329.new.html - здесь про "склеивание" с www и без.
Дубли можно "закрыть" в robots.txt или поставить компонент, например sef404.
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
что ж - каждый раз в роботс лезть? а sef404 даёт лишнюю нагрузку
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
а что, разве у меня эти адреса не "склеены"?
*

profiX0808

  • Захожу иногда
  • 497
  • 70 / 0
что ж - каждый раз в роботс лезть? а sef404 даёт лишнюю нагрузку
Посмотреть проиндексированные странички, может там какая закономерность в урлах для дубликатов, то можно например одной строкой сразу много дублей "отсечь".

Ну можете без лишней нагрузки ждать санкций от ПС, решать вам конечно же.
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
закономерность там одна: ссылки из модуля последних новостей соотносятся со всеми ссылками левого меню. все остальные материалы на своих местах.
кстати, что такое ПС?)
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
уже, кстати и модуль новостей сменил, на сайте вроде всё нормально, а при создании карты - опять 25
*

profiX0808

  • Захожу иногда
  • 497
  • 70 / 0
кстати, что такое ПС?)
Поисковые системы, особенно дубли не любит Яндекс
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
да Яндекс вообще ни фига не любит, кроме себя любимого.
так что, по-другому никак нельзя исправить? только роботс править или SEF устанавливать?
*

igorksan

  • Давно я тут
  • 503
  • 23 / 1
Попробовать можно компонент для редиректов страниц ReDj, дубль страницы перенаправить на основную, плюс 404ю можно сделать. Мне помогает. Хотя может я и не прав с точки зрения ГУРУ..
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
какого ещё гуру?) а 404-ую тоже с помощью этого компонента делать?
*

igorksan

  • Давно я тут
  • 503
  • 23 / 1
Легко.. Там всё понятно и доступно.  ^-^ Ну а "Гуру" я имел в виду акул програмирования и оптимизации тусующихся на этом форуме. ;D
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
ну тогда я подожду что скажет кто-нибудь из гуру на этот счёт). просто ставить целый компонент, потом настраивать - а в результате может это и не помочь абсолютно... ну а вам всё равно за совет спасибо)
*

igorksan

  • Давно я тут
  • 503
  • 23 / 1
До использования компонента ReDJ ,у меня в вебмастере было 54 404х- сейчас -0. ну и дублей и "неправильных урлов" кучу перенаправил в нужное русло,где на нужный материал, где на Главную. Думаю у каждого есть тестовый мёртвый сайтик, погоняйте на нём, проверьте.
« Последнее редактирование: 03.10.2010, 07:01:46 от igorksan »
*

profiX0808

  • Захожу иногда
  • 497
  • 70 / 0
Если компонент позволяет перенаправлять с "дубля" на "оригинал", то можно ограничиться им.
404-ые по ходу сами со временем близятся к 0 в вебмастере. А если с дубля перенаправлять к примеру на главную, то это будет расценено как манипуляция пользователями и негативно скажется на сайте (санкции от ПС).
*

ЖиВоЙ

  • Захожу иногда
  • 362
  • 3 / 0
...а что значит "404-ые по ходу сами со временем близятся к 0 в вебмастере"?
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Как продвигать сайт! (интернет-магазин)?

Автор Kooll5

Ответов: 31
Просмотров: 7857
Последний ответ 07.02.2023, 13:59:57
от Ратник
Один сайт, доступный через два домена (зеркало?)

Автор slepoy

Ответов: 2
Просмотров: 1407
Последний ответ 20.11.2021, 17:50:48
от Byzi
Ссылки на мой сайт не подтягивают фото

Автор MbJaws

Ответов: 7
Просмотров: 1777
Последний ответ 26.10.2020, 13:40:24
от MbJaws
Сайт тематики автоуслуг, на чем лучше продвигать

Автор fisgard

Ответов: 0
Просмотров: 1127
Последний ответ 24.03.2020, 12:20:37
от fisgard
Сайт плохо индексируется Google ботом!

Автор sd2

Ответов: 5
Просмотров: 1406
Последний ответ 31.01.2019, 06:24:05
от User82