Новости Joomla

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях

👩‍💻 Человек на GitHub ускорил Joomla в 600 раз на объёме 150к+ материалов в 1700+ категориях. На старте его сайт на Joomla 3 вообще не смог обновиться на Joomla 5. Пришлось делать экспорт/импорт материалов. Проделав всё это он запустил-таки этот объём данных на Joomla 5. Тестовый скрипт грузил 200 материалов из этого объёма всего за 94 секунды ))) А главная страница с категориями грузилась 20 секунд. Добавив индекс для таблицы #__content

CREATE INDEX idx_catid_state ON #__content (catid, state);
он сократил время загрузки категорий до 1 секунды. Затем наш герой решил поковырять SQL-запрос в ArticleModel, который отвечает за выборку материалов. И решил заменить тип JOIN на STRAIGHT_JOIN для категорий.
// ->from($db->quoteName('#__content', 'a'))->from(    $db->quoteName('#__content', 'a')    . ' STRAIGHT_JOIN ' . $db->quoteName('#__categories', 'c')    . ' ON ' . $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))// ->join('LEFT', $db->quoteName('#__categories', 'c'), $db->quoteName('c.id') . ' = ' . $db->quoteName('a.catid'))
Что сократило загрузку 200 материалов из 150к с 94 секунд до 5. К слову сказать, боевой сайт на Joomla 3 крутится на 12CPU 64GB рамы. А все манипуляции с кодом он делает на базовом 1CPU 1GB сервере и замеры скорости даны именно для базового сервера. Но это всё в дискуссии, хотя в идеале должно вылиться в Pull Requests. Мы - Open Source сообщество, где никто никому ничего не должен. Джунгли. Но человек ищет пути оптимизации Joomla и предлагает решения. Если оказать поддержку и предложить помощь хотя бы с тестированием самых разнообразных сценариев, то возможно эти улучшения смогут войти в ядро. Пусть не быстро, пусть через несколько лет, пусть не все, но войдут. Достаточно предложить руку помощи и приложить немного усилий.
Дискуссию на GitHub можно почитать здесь.@joomlafeed#joomla #community #php

0 Пользователей и 1 Гость просматривают эту тему.
  • 8 Ответов
  • 5657 Просмотров
*

Benny097

  • Новичок
  • 4
  • 0 / 0
проблема с яндексом
« : 04.12.2011, 18:19:25 »
Здравстуйте))

не знаю куда и писать такие вопросы, если что извините.
у меня возникла проблема я яндексом, не знаю где и искать ответы. Подскажите пожалуйста)

 добавил сайт (в Яндекс каталог, вебмастера), доказал свои права на него, но проиндексировать не смог его
Цитировать
Сайт был недоступен для нашего робота, поэтому не был проиндексирован
и вот это пишет
Цитировать
Ранее DNS-сервер не вернул нашему роботу IP-адрес Вашего сайта, поэтому сайт не был проиндексирован. Пожалуйста, воспользуйтесь формой проверки. Если сервер отдает HTTP-код 200, то сайт начнет индексироваться в течение 2 недель, после чего сообщение обновится. Если установить соединение с севером не удается, то по вопросу устранения проблемы Вам нужно обратиться к Вашему провайдеру или хостеру
айпи у меня есть, на хостинге можно только выделенный айпи купить, а это почти 4 рубля в сутки... думаю это не то.
 запуская проверку на индексацию выводит следующее
Цитировать
Проблемы с индексированием сайта могут быть связаны с тем, что ваш веб-сервер отвечает роботам Яндекса не так, как обычным пользователям. Чтобы увидеть, как веб-сервер отвечает роботу Яндекса, укажите URL и нажмите «Проверить».

Поскольку проверка ответа сервера выполняется без учёта директивы Crawl-Delay, инструмент доступен только для подтверждённых сайтов.

Роботы Яндекса делают запросы с различных ip-адресов. Данный инструмент может не выявить проблему, если ваш веб-сервер отвечает по-разному в зависимости от ip-адреса машины, выполняющей запрос.
потом проверка и это внизу пишет
Цитировать
Код статуса HTTP:  "200 OK"
Время ответа сервера: 220мс
IP сайта: 81.177.140.11
Заголовки:
Transfer-Encoding: chunked
Date: Sun, 04 Dec 2011 14:02:08 GMT
P3P: CP="NOI ADM DEV PSAi COM NAV OUR OTRo STP IND DEM"
Set-Cookie: 88f1c32c503bd839f2da39152477a5e1=6633a0935e827cb1de0a742198d15c70; path=/
Set-Cookie: 88f1c32c503bd839f2da39152477a5e1=deleted; expires=Sat, 04-Dec-2010 14:02:06 GMT; path=/
Connection: close
Content-Type: text/html; charset=utf-8
Server: Jino.ru/mod_pizza
Pragma: no-cache
Cache-Control: no-cache
Кодировка: utf-8
Размер страницы: 9.81Кб
про шттп 200 поискал в инете ничего не понял, но это вроде не запрет.
плюс есть такой фаил как robots.txt

я сначало прописал в нем User-agent: Yandex # в примере Яндекс дал, что для считывания инфы всеми роботами нужно это прописать, прописал... не пошло... потом удалил совсем этот фаил. и все равно ошибка при индексировании.. при проверки robots.txt  (текст внизу)
Цитировать
# If the Joomla site is installed within a folder such as at
# e.g. www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. www.example.com/robots.txt
# AND the Joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/orig.html
#
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html

User-agent: Yandex #
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
яндекс пишет следующее
Цитировать
Строка   

        14-29        User-agent: Yandex #
Disallow: /administrator/
...
Disallow: /tmp/
писал в Яндекс по этой проблеме и хостеру, но нету ответа от них. подскажите пожалуйста если что то поняли в этом

(ссылку на сайт не оставил, это не реклама, но если надо то скажу)
*

tops974

  • Захожу иногда
  • 73
  • 5 / 0
Re: проблема с яндексом
« Ответ #1 : 04.12.2011, 18:30:32 »
Решетку здесь надо убрать!
Цитировать
User-agent: Yandex #
Статус 200 означает что все нормально!
Ждите индексации.
*

Benny097

  • Новичок
  • 4
  • 0 / 0
Re: проблема с яндексом
« Ответ #2 : 04.12.2011, 18:35:02 »
спасибо за ответ)

да я 2 сайта одновременно создал, один проиндексировали второй нет... да и бесплатный форум сразу проиндексировал, это уже 3 сайт.

решетку уберу, только что это даст?)) если даже можно удалить этот фаил не изменится ничего.
*

tops974

  • Захожу иногда
  • 73
  • 5 / 0
Re: проблема с яндексом
« Ответ #3 : 04.12.2011, 19:02:17 »
Файл Robots.txt убирать не надо! уберите решетку и попробуйте еще раз проверить.
*

Benny097

  • Новичок
  • 4
  • 0 / 0
Re: проблема с яндексом
« Ответ #4 : 04.12.2011, 19:23:21 »
Спасибо за ответ. Убрал решетку, ничего не изменилось.. хотя нет) изменилось теперь когда проверяет сайт строчек ошибок меньше

Цитировать
Код статуса HTTP:  "200 OK"
Время ответа сервера: 148мс
IP сайта: 81.177.140.11
Заголовки:
Transfer-Encoding: chunked
Date: Sun, 04 Dec 2011 15:22:50 GMT
P3P: CP="NOI ADM DEV PSAi COM NAV OUR OTRo STP IND DEM"
Connection: close
Content-Type: text/html; charset=utf-8
Server: Jino.ru/mod_pizza
Pragma: no-cache
Cache-Control: no-cache
Кодировка: utf-8
Размер страницы: 9.81Кб
*

tops974

  • Захожу иногда
  • 73
  • 5 / 0
Re: проблема с яндексом
« Ответ #5 : 04.12.2011, 19:48:26 »
Я не вижу у Вас здесь ошибок!
*

Benny097

  • Новичок
  • 4
  • 0 / 0
Re: проблема с яндексом
« Ответ #6 : 04.12.2011, 19:57:24 »
да и я не вижу, ай пи сайта видит все нормально, права доказал... подожду что ответят в яндексе и на моем хосте.  хост ответит, а Яндекс думаю не станет отвечать... придется ждать пару недель.. хотя странно, 2 сайта на одном хостинге, материалов по одному, а одни принимает а второй нет..

так же и в Google)) пишет ошибку Robots.txt и 1000 ссылок не видит, адреса есть а при переходе пишет 404. хотя сегодня вроде 4 декабря, а статистику показывает за 3 число.
*

алина

  • Новичок
  • 1
  • 0 / 0
Re: проблема с яндексом
« Ответ #7 : 04.08.2012, 01:58:04 »
Код статуса HTTP: "200 OK"
Время ответа сервера: 20мс
IP сайта: 37.140.192.18
Заголовки:

    Date: Fri, 03 Aug 2012 21:54:23 GMT
    Content-Length: 24651
    Last-Modified: Fri, 03 Aug 2012 21:41:45 GMT
    Accept-Ranges: bytes
    Connection: keep-alive
    Content-Type: text/html
    X-Powered-By: PleskLin
    Server: nginx

Кодировка: UTF-8
Размер страницы: 20.98Кб

ошибка есть?
*

Marques

  • Завсегдатай
  • 1410
  • 190 / 9
  • Ctrl+F5
Re: проблема с яндексом
« Ответ #8 : 06.08.2012, 05:38:18 »
Алина, а в чем ошибка-то ?

То что вы написали никакой ошибки не содержит...
Зануда перфекционист, не признающий авторитетов, ищет легкую работу за большие деньги - http://dtkp.ru/ s@dtkp.ru
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Проблема с поисковиком

Автор Vismuth

Ответов: 6
Просмотров: 907
Последний ответ 09.11.2020, 13:51:26
от Vismuth
Языки /en/ /ru/ проблема с входом в админку и редиректит на site.r/ru/robots.txt

Автор HolySong

Ответов: 0
Просмотров: 1126
Последний ответ 10.07.2020, 13:12:46
от HolySong
Проблема с индексацией в Google

Автор KingSnake

Ответов: 1
Просмотров: 1232
Последний ответ 27.04.2019, 14:03:48
от smallplushbear
Есть ли в Joomla 3.9 проблема с дублями страниц?

Автор shop-user

Ответов: 13
Просмотров: 2657
Последний ответ 08.01.2019, 14:30:39
от zikkuratvk
Проблема с robots.txt

Автор iryewa

Ответов: 9
Просмотров: 1817
Последний ответ 31.01.2018, 06:47:49
от iryewa