0 Пользователей и 1 Гость просматривают эту тему.
  • 8 Ответов
  • 1715 Просмотров
*

leo78

  • Завсегдатай
  • 1020
  • 62 / 8
  • I left from paradise!?...
Проверка ссылок
http://validator.w3.org/checklink

За частую такое бывает с ссылками VK - Закрыты от индексации
Цитировать
501   1   Could not check this link: method not implemented or scheme not supported.
Цитировать
Status: 501 Not Implemented
Could not check this link: method not implemented or scheme not supported.

Атрибут rel="nofollow"
можно указать
В принципе все ссылки идут итак:
Код
nofollow noopener noreferrer

Но это мало, для Link Checker  ;D

Нужно это прописать в robots.txt, но ссылку вставить туда не получиться  :'(
Для этого воспользуемся встроенным в Joomla - Компонентом  Перенаправление

Администратор => Менеджер перенаправлений: Ссылки => Создать

Исходный URL *
Код
openapi.js?150
URL назначения *
Код
http://vk.com/js/api/openapi.js?150

- После чего меняем ссылку

Код
<script src="//vk.com/js/api/openapi.js?150"></script>
на
Код
<script src="openapi.js?150"></script>

Далее в robots.txt добавляем строку:
Код
Disallow: /openapi.js?150

Всё
Цитировать
Status: (N/A) Forbidden by robots.txt
The link was not checked due to robots exclusion rules. Check the link manually.

 *DRINK*
*

voland

  • Легенда
  • 11022
  • 587 / 112
  • Эта строка съедает место на вашем мониторе
*

leo78

  • Завсегдатай
  • 1020
  • 62 / 8
  • I left from paradise!?...
 *RTFM* если пишет:
Цитировать
Не реализована
Не удалось проверить эту ссылку: метод не реализован или схема не поддерживается.
то после этих изменений будет писать:
Цитировать
Статус: (N / A) Запрещено robots.txt
Ссылка не была проверена из-за правил исключения роботов. Проверьте ссылку вручную.

- Это конкретно vk ссылки, для остальных может и не нужно  ;D

Цитировать
Файл robots.txt — текстовый файл в формате .txt, ограничивающий поисковым роботам доступ к содержимому на http-сервере. Как определение, Robots.txt — это стандарт исключений для роботов, который был принят консорциумом W3C 30 января 1994 года, и который добровольно использует большинство поисковых систем.

Цитировать
Атрибут rel="nofollow" - Значение nofollow запрещает поисковой системе переходить по ссылкам на данной странице или по конкретной ссылке.

Цитировать
noindex — имя не входящего в официальную спецификацию тега языка гипертекстовой разметки веб-страниц HTML, предназначенного для включения в него частей веб-страниц, не предлагаемых к индексации поисковыми системами.

- если и после этого, возникает тот же вопрос:
Цитировать
И зачем это?
Проблемы описанные в этой теме, у вас нет  *suicide*
« Последнее редактирование: 21.11.2017, 22:33:20 от leo78 »
*

voland

  • Легенда
  • 11022
  • 587 / 112
  • Эта строка съедает место на вашем мониторе
*

leo78

  • Завсегдатай
  • 1020
  • 62 / 8
  • I left from paradise!?...
Я к тому, кому от этого хорошо?
Яндексу, гуглу?
Цитировать
Цитирование — это прямое использование текста источника в Википедии. При добавлении в текст статьи цитаты в первую очередь следует соблюдать главные требования к цитате: уместность и точность.

Цитировать
Индексация сайта – это обход роботами поисковых систем сайта, и внесения его в базу. Поисковые роботы заносят в базу информацию о сайте и всех его страницах, которые доступны для поиска. Поисковой бот индексирует ссылки, изображения, видео, и другие элементы на сайте.18 нояб. 2012 г.

Яндексу, гуглу об этом тоже пишет:
https://yandex.ru/support/webmaster/controlling-robot/html.html
https://support.google.com/webmasters/answer/93710?hl=ru

Яндексу, гуглу - легче будет  ;D
 *DRINK*
« Последнее редактирование: 21.11.2017, 22:43:03 от leo78 »
*

leo78

  • Завсегдатай
  • 1020
  • 62 / 8
  • I left from paradise!?...
Что касается других социальных сетей: фб, твиттер, ютуб (Индексируемая) - они не Закрыты от индексации, как ВК *RTFM*
*

robert

  • Живу я здесь
  • 4974
  • 457 / 20
Короче, @voland, не знаю, как вам, но мне ничего не понятно  ;D.
Не будь паразитом, сделай что-нибудь самостоятельно!
*

voland

  • Легенда
  • 11022
  • 587 / 112
  • Эта строка съедает место на вашем мониторе
*

LyizaMona

  • Новичок
  • 1
  • 0 / 0
Довольно полезная информация, но уже мне кажется не совсем актуальная. Сейчас можно запустить массовую проверку индексации http://linkbox.pro/ru/proverka-indeskacii-ssilok - вот хоть через этот сервис. Особенно полезно отслеживать как после апдейтов Google часть ссылок просто выпадает из индекса.
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

Не дело это - закрывать от индексации страницы с пагинацией

Автор ChaosHead

Ответов: 47
Просмотров: 9287
Последний ответ 07.11.2020, 17:50:27
от stimyl
Ссылки на мой сайт не подтягивают фото

Автор MbJaws

Ответов: 7
Просмотров: 616
Последний ответ 26.10.2020, 13:40:24
от MbJaws
noindex для ссылок на документы?

Автор Игарь

Ответов: 14
Просмотров: 950
Последний ответ 15.09.2020, 16:57:17
от rsn
Появилось 5к левых ссылок

Автор zeher

Ответов: 8
Просмотров: 508
Последний ответ 21.05.2019, 15:57:18
от ChaosHead
Как сделать код ответа сервера 404 у страницы ошибки в Joomla?

Автор Dim

Ответов: 0
Просмотров: 538
Последний ответ 20.12.2018, 19:59:32
от Dim