Новости Joomla

Компонент Joomla 6: Генератор LLMs.txt.

Компонент Joomla 6: Генератор LLMs.txt.

Компонент Joomla 6: Генератор LLMs.txt.

Ещё один генератор ИИ-файлов llms.txt и llms-full.txt.

Основные особенности/возможности компонента:

  • Генерация по стандарту: Автоматическое создание файла-визитки llms.txt и расширенной версии llms-full.txt с аннотированным списком материалов.
  • Интеллектуальная работа с контентом: Компонент использует мета-описания (Meta Description) из статей и пунктов меню, превращая SEO-настройки сайта в качественный контекст для нейросетей.
  • Просмотреть результат генерации файлов можно сразу в рабочей области компонента. После внесения корректив (через Настройки компонента. При отладке лучше открыть три вкладки в браузере: Настройка — Геренация/Превью — Список Материалов/Категории/Меню.) — проводим перегенерацию, смотрим результат до полной «победы».
  • Автоматизация и безопасность: Синхронизация с sitemap.xml, группировка по категориям и автоматическое создание резервных копий (.bak) при каждой генерации.
  • Гибкое управление: Возможность исключения определенных категорий и/или статей и/или пунктов меню, а также простая настройка через стандартную админпанель Joomla.
  • Подробное руководство/справка: Пошаговая инструкция для пользователя в Настройках компонента для редакторов с базовым знанием администрирования Joomla.

👉 Важно учесть.
1️⃣ Компонент Генератор LLMs.txt изначально составляет базовый список ссылок на основе sitemap.xml и сверяется с ним на предмет: запрета индексации url в robots.txt, тегов noinex/nofollow. Это экономит время на проверку «закрыть от индексации», поскольку компонент генерации Sitemap.xml уже реализовал эту задачу. Посему, формирование ссылок для ИИ имеет комплексный подход, составление грамотного/валидного/релевантного sitemap.xml никто не отменял.

2️⃣ Тексты-описания ссылок формируются из Meta Description com_content (только компонент Материалы) и выбранных пользователем Меню сайта. Важно, чтобы Meta Description были уникальными и релевантными, соответствовали базовому seo. Составленные «на отшибись» Description для ИИ — «не катит» (впрочем, для поисковых систем они тоже «не канали»).

Разработчик - участник нашего сообщества Александр Кузнецов (@newvksan).

Страница расширения

@joomlafeed

#joomla #ии #ai

👩‍💻 WT LLMs для Joomla: llms.txt, llms.json для AI-агентов.

👩‍💻 WT LLMs для Joomla: llms.txt, llms.json для AI-агентов.

Это Joomla-компонент для публикации AI-ready карты сайта и автоматической генерации файлов llms.txt, llms-full.txt и llms.json по концепции llmstxt.org.  Также о концепции llms.txt говорит Google в своей справке Lighthouse. Решение помогает LLM-моделям, AI-агентам, GEO/AI SEO-процессам и внутренним автоматизациям получать структурированные данные о сайте без ручной сборки JSON и Markdown.

С помощью WT LLMs можно:
- создать структурированное описание сайта для AI-агентов;
- управлять профилем сайта, картой интентов и каноническими страницами для этих интентов из админки Joomla;
- генерировать llms.txt и llms.json;
- использовать REST API для автоматического заполнения данных;
- отдавать публичную schema-инструкцию для AI-агентов;

В комплект компонента входит плагин markdown-версии страниц Joomla. Системный плагин Joomla, который добавляет альтернативное Markdown-представление страниц сайта. Он позволяет отдавать содержимое страницы в более чистом текстовом формате, удобном для AI-агентов, LLM, поисковых систем и технических интеграций.
Плагин добавляет в ссылки на AI-файлы.

Пакет подходит для сайтов на Joomla 5+, которым важно сделать контент понятнее для LLM, AI-поиска, ассистентов и будущих систем машинного чтения.

Видео:
- ВК Видео
- RuTube
- YouTube

Ссылки:
Страница расширения
GitHub

@joomlafeed

0 Пользователей и 1 Гость просматривают эту тему.
  • 13 Ответов
  • 1818 Просмотров
*

bronepoezd27

  • Захожу иногда
  • 233
  • 1 / 1
Всем доброго времени суток!
Имеется сайт:
http://myuborka24.ru
Есть вот такой дубль, непонятно откуда он взялся:
http://myuborka24.ru/component/content/?view=featured

Прописал в .htaccess:
Redirect 301 /component/content/?view=featured http://myuborka24.ru

А ему до лампочки, нет никакой реакции... Кто-нибудь сможет подсказать в чем тут дело? Или какуе-то другую команду 301 редиректа нужно вводить?
*

ELLE

  • Глобальный модератор
  • 4505
  • 893 / 0
Или какуе-то другую команду 301 редиректа нужно вводить?
Читайте FAQ по htaccess, там есть про редирект с параметрами
*

Kostelano

  • Давно я тут
  • 525
  • 52 / 1
Эта страница найдена роботом и она в поиске?

Вообще не нужно париться по поводу дублей, просто нужно все закрыть в robots.txt.

User-agent: *
Disallow: /administrator/
Disallow: /bin/
Disallow: /cache/
Disallow: /cli/
Disallow: /component/ -------------- убираем из индекса дубли
Disallow: /components/
Disallow: /includes/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /*catid -------------- убираем из индекса дубли
Disallow: /*content -------------- убираем из индекса дубли
Disallow: /*search -------------- убираем из индекса страницу с поиском
Disallow: /*uncategorised -------------- убираем из индекса дубли категории материалов "БЕЗ КАТЕГОРИИ"
Disallow: /*user -------------- убираем из индекса страницы авторизации, восстановления паролей и т.д.
Allow: /images/
Allow: /media/*.css$
Allow: /media/*.js$
Allow: /templates/*.css$
Allow: /templates/*.js$
Sitemap: http://тра-та-та-та

=======================

Собственно, я не использую плагины для склейки страниц и т.д. и ничего в индексе нет левого. Главное - правильный robots.txt.
« Последнее редактирование: 12.05.2015, 00:08:01 от Kostelano »
*

bronepoezd27

  • Захожу иногда
  • 233
  • 1 / 1
Эта страница найдена роботом и она в поиске?

Вообще не нужно париться по поводу дублей, просто нужно все закрыть в robots.txt.

User-agent: *
Disallow: /administrator/
Disallow: /bin/
Disallow: /cache/
Disallow: /cli/
Disallow: /component/ -------------- убираем из индекса дубли
Disallow: /components/
Disallow: /includes/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /*catid -------------- убираем из индекса дубли
Disallow: /*content -------------- убираем из индекса дубли
Disallow: /*search -------------- убираем из индекса страницу с поиском
Disallow: /*uncategorised -------------- убираем из индекса дубли категории материалов "БЕЗ КАТЕГОРИИ"
Disallow: /*user -------------- убираем из индекса страницы авторизации, восстановления паролей и т.д.
Allow: /images/
Allow: /media/*.css$
Allow: /media/*.js$
Allow: /templates/*.css$
Allow: /templates/*.js$
Sitemap: http://тра-та-та-та

=======================

Собственно, я не использую плагины для склейки страниц и т.д. и ничего в индексе нет левого. Главное - правильный robots.txt.

Вот мой robots.txt

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/

Есть эти опции и все равно в индексе эта страница есть и она в поиске.
*

bronepoezd27

  • Захожу иногда
  • 233
  • 1 / 1
Читайте FAQ по htaccess, там есть про редирект с параметрами

Нашел кучу всяких параметров 301 редиректа. Добавить "/" убрать его. С домена www на без www и т.д., а про свою ситуацию я чего-то ничего не увидел. Ну только то, что я как раз и использовал...
*

ELLE

  • Глобальный модератор
  • 4505
  • 893 / 0
см 5. Редирект для страниц с параметрами

или в robots.txt добавить:
Disallow: /component
*

bronepoezd27

  • Захожу иногда
  • 233
  • 1 / 1
см 5. Редирект для страниц с параметрами

или в robots.txt добавить:
Disallow: /component

А у меня Disallow: /components стоял, невнимательно посмотрел.
Спасибо сейчас исправлю!
*

bronepoezd27

  • Захожу иногда
  • 233
  • 1 / 1
Вот мой robots.txt

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/

Есть эти опции и все равно в индексе эта страница есть и она в поиске.

Т.е. эту схему можно смело применять на всех сайтах? Ну разумеется если нет ничего экзотического, где специально нужно будет разрешить запрещенные выше категории?
*

Kostelano

  • Давно я тут
  • 525
  • 52 / 1
А у меня Disallow: /components стоял, невнимательно посмотрел.
Спасибо сейчас исправлю!

Исправлять не нужно, еще раз обрати внимание на мой ответ с robots.txt (выше), там есть и /component и /components.

Цитировать
Т.е. эту схему можно смело применять на всех сайтах? Ну разумеется если нет ничего экзотического, где специально нужно будет разрешить запрещенные выше категории?

Да.
*

bronepoezd27

  • Захожу иногда
  • 233
  • 1 / 1
А на сколько орректным является роботс?

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /component/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/

User-agent: Yandex
Allow: /
Sitemap: http://nsservice.ru/index.php?option=com_xmap&view=xml&tmpl=component&id=1

Смущает именно вот этот пункт:
User-agent: Yandex
Allow: /
*

arma

  • Завсегдатай
  • 1752
  • 81 / 3
Он лишний - "User-agent: *" уже включает его
*

bronepoezd27

  • Захожу иногда
  • 233
  • 1 / 1
Он лишний - "User-agent: *" уже включает его

А чтобы у меня индексировались картинки
В секции Disallow если его нет, то обязательно приписывать ниже, как указано в примере от пользователя Kostelano?
Allow: /images/
*

bronepoezd27

  • Захожу иногда
  • 233
  • 1 / 1
И еще, нужно ли 404 страницу исключать из индекса?
*

Kostelano

  • Давно я тут
  • 525
  • 52 / 1
А чтобы у меня индексировались картинки
В секции Disallow если его нет, то обязательно приписывать ниже, как указано в примере от пользователя Kostelano?
Allow: /images/
Не обязательно.

И еще, нужно ли 404 страницу исключать из индекса?
Нужно если есть отдельная страница 404, т.е. ты можешь сам получить к ней доступ набрав адрес к примеру сайт.ру/404.html,
в противном случае не нужно.
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Редирект для страницы с добавлением кода языка

Автор zeus07

Ответов: 0
Просмотров: 4269
Последний ответ 26.06.2023, 11:25:10
от zeus07
Google не индексирует страницы через ajax ссылки

Автор illimited

Ответов: 0
Просмотров: 3435
Последний ответ 31.03.2022, 23:53:05
от illimited
Не дело это - закрывать от индексации страницы с пагинацией

Автор ChaosHead

Ответов: 48
Просмотров: 13495
Последний ответ 04.11.2021, 06:44:26
от Slava77
В вебмастере появляются левые страницы

Автор Dmitriy M

Ответов: 1
Просмотров: 1232
Последний ответ 22.09.2021, 19:14:32
от Dmitriy M
Скорость загрузки страницы

Автор creative3d

Ответов: 6
Просмотров: 1791
Последний ответ 15.03.2020, 19:26:25
от creative3d