0 Пользователей и 1 Гость просматривают эту тему.
  • 13 Ответов
  • 538 Просмотров
*

vegastk

  • Осваиваюсь на форуме
  • 41
  • 0 / 0
URL нет в индексе Google
« : 18.07.2019, 22:32:23 »
Здравствуйте.
Сайт в выдаче Google имеет вот такой вид:

vega-stk.ru
https://vega-stk.ru/
Информация об этой странице недоступна.
Подробнее…

В консоли пишет мол запрет в роботс.
Подскажите, пожалуйста, что надо убрать или добавить, чтобы сайт вернулся в индекс Google.
Содержимое роботс:

# If the Joomla site is installed within a folder such as at
# e.g. http://www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. http://www.example.com/robots.txt
# AND the Joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/orig.html
#
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /component/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /*?
Disallow: /*%
Disallow: /*&
Disallow: /index.php
Disallow: /index2.php
Disallow: /*mailto/
Host: https://vega-stk.ru
*

voland

  • Легенда
  • 10671
  • 568 / 111
  • Эта строка съедает место на вашем мониторе
Re: URL нет в индексе Google
« Ответ #1 : 18.07.2019, 22:49:16 »
Здравствуйте.
Сайт в выдаче Google имеет вот такой вид:

vega-stk.ru
https://vega-stk.ru/
Информация об этой странице недоступна.
Подробнее…

В консоли пишет мол запрет в роботс.
Подскажите, пожалуйста, что надо убрать или добавить, чтобы сайт вернулся в индекс Google.
Содержимое роботс:

# If the Joomla site is installed within a folder such as at
# e.g. http://www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. http://www.example.com/robots.txt
# AND the Joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/orig.html
#
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /component/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /*?
Disallow: /*%
Disallow: /*&
Disallow: /index.php
Disallow: /index2.php
Disallow: /*mailto/
Host: https://vega-stk.ru

Disallow: /*?
Disallow: /*%
Disallow: /*&
Disallow: /index.php
*

vegastk

  • Осваиваюсь на форуме
  • 41
  • 0 / 0
Re: URL нет в индексе Google
« Ответ #2 : 18.07.2019, 22:56:46 »
Disallow: /*?
Disallow: /*%
Disallow: /*&
Disallow: /index.php

Спасибо за ответ. Эти строки надо удалить и будет мне счастье?
*

voland

  • Легенда
  • 10671
  • 568 / 111
  • Эта строка съедает место на вашем мониторе
Re: URL нет в индексе Google
« Ответ #3 : 18.07.2019, 22:58:43 »
Disallow: /*?
Disallow: /*%
Disallow: /*&
Disallow: /index.php

Спасибо за ответ. Эти строки надо удалить и будет мне счастье?
Не вникал глубоко, но, возможно
ЗЫ. А зачем меняли стандартный то?
*

vegastk

  • Осваиваюсь на форуме
  • 41
  • 0 / 0
Re: URL нет в индексе Google
« Ответ #4 : 18.07.2019, 23:03:02 »
Не вникал глубоко, но, возможно
ЗЫ. А зачем меняли стандартный то?
Затрудняюсь с ответом, но вроде как это с безопасностью было связано и курочил роботс.
Удалил эти строки. сейчас в консоли попробую запросить индексацию

После запросить индексирование:
Произошла ошибка
Ошибка при отправке запроса на индексирование. Повторите попытку позже.
*

Kostelano

  • Захожу иногда
  • 434
  • 34 / 1
Re: URL нет в индексе Google
« Ответ #5 : 19.07.2019, 02:02:38 »
Я не понял, какая именно страница блочится в Google? У вас в индексе миллиард страниц.

Что касается главной, то в robots.txt она не запрещена к индексации. Даже в вариенте из первого поста. Но, возможно, закрыта индексация в админке Joomla:

Меню --> Главное меню --> Главная (изменить) --> Метаданные.

*

Cedars

  • Захожу иногда
  • 305
  • 12 / 0
Re: URL нет в индексе Google
« Ответ #6 : 19.07.2019, 07:23:54 »
Нормально все индексируется:
Скриншот: https://yadi.sk/d/kE1ggQhF_b1Gyg

За последний месяц 3 статьи проиндексировано: https://yadi.sk/d/_AbcpwPtsMqLIQ
*

vegastk

  • Осваиваюсь на форуме
  • 41
  • 0 / 0
Re: URL нет в индексе Google
« Ответ #7 : 20.07.2019, 01:17:54 »
Большое спасибо за ответы!
Ничего не понимаю. В Google консоли при принудительном индексировании пишет: запрет на индексирование в роботс.
Про главную вот так:
В настройках главной страницы джумы мета-тег роботс было "по умолчанию". Сейчас изменил на index, folow.
И в поиске нет описания страницы.
« Последнее редактирование: 20.07.2019, 01:26:46 от vegastk »
*

Kostelano

  • Захожу иногда
  • 434
  • 34 / 1
Re: URL нет в индексе Google
« Ответ #8 : 20.07.2019, 02:13:00 »
Странности. Текущий robots.txt абсолютно нормальный. Проверьте/обновите его в старой консоли Google.

Давно на https перешли? Google постепенно переиндексирует, может с главной просто еще не успел.

В старом robots.txt была запись:
Код
Disallow: /index.php
Перенаправления с vega-stk.ru/index.php на vega-stk.ru у вас нет и помешать индексации запись не могла.

Так что просто ждите.
*

vegastk

  • Осваиваюсь на форуме
  • 41
  • 0 / 0
Re: URL нет в индексе Google
« Ответ #9 : 20.07.2019, 02:33:51 »
Так что просто ждите.
На https недели 2 как.
Буду ждать.

А надо сделать перенаправление с vega-stk.ru/index.php на vega-stk.ru ?
или надо вернуть запись: Disallow: /index.php
вдруг дубли появятся ...
« Последнее редактирование: 20.07.2019, 05:46:41 от vegastk »
*

Kostelano

  • Захожу иногда
  • 434
  • 34 / 1
Re: URL нет в индексе Google
« Ответ #10 : 20.07.2019, 08:01:30 »
На https недели 2 как.
Буду ждать.

А надо сделать перенаправление с vega-stk.ru/index.php на vega-stk.ru ?

2 недели - не срок, конечно.

Наборы правил .htaccess, один из первых - ваш. И может что-нибудь еще пригодится.

Код
RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /index\.php\ HTTP/
RewriteRule ^index\.php$ https://vega-stk.ru/ [R=301,L]
« Последнее редактирование: 20.07.2019, 08:04:50 от Kostelano »
*

vegastk

  • Осваиваюсь на форуме
  • 41
  • 0 / 0
Re: URL нет в индексе Google
« Ответ #11 : 20.07.2019, 08:13:51 »
Спасибо. Записал указанный вами код в хтассес.
В яндекс браузере добавляю к адресу /index.php, нажимаю enter и получается - как на картинке.
А при 301 редиректе сайт недоступен - мол, слишком много переадрессаций ...
« Последнее редактирование: 20.07.2019, 08:29:51 от vegastk »
*

Kostelano

  • Захожу иногда
  • 434
  • 34 / 1
Re: URL нет в индексе Google
« Ответ #12 : 20.07.2019, 12:23:28 »
В Яндекс браузере добавляю к адресу /index.php, нажимаю enter и получается - как на картинке.
А при 301 редиректе сайт недоступен - мол, слишком много переадрессаций ...

Сейчас перенаправление работает. Что помогло?
*

vegastk

  • Осваиваюсь на форуме
  • 41
  • 0 / 0
Re: URL нет в индексе Google
« Ответ #13 : 20.07.2019, 17:29:27 »
RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /index\.php\ HTTP/
RewriteRule ^index\.php$ https://vega-stk.ru/ [R=301,L]

Вот это в хтассес.
Но в яндекс браузере что то странное происходит с https://vega-stk.ru/index.php
« Последнее редактирование: 20.07.2019, 17:35:53 от vegastk »
Чтобы оставить сообщение,
Вам необходимо Войти или Зарегистрироваться
 

PageSpeed Tools от Google и КЕШ в Joomla

Автор Lann

Ответов: 9
Просмотров: 2113
Последний ответ 22.10.2018, 11:49:07
от Stasweb
Цвет шапки в Google chrome

Автор Nekromantishen

Ответов: 1
Просмотров: 843
Последний ответ 15.05.2018, 12:44:11
от beliyadm
Page Speed Google

Автор Mick_20

Ответов: 11
Просмотров: 12555
Последний ответ 25.10.2016, 11:46:48
от Igoritaly
Почему появляется страницы в индексе в виде блока категорий, если нет привязанной к ней меню

Автор CRYing

Ответов: 3
Просмотров: 712
Последний ответ 23.01.2016, 17:55:34
от Andrey-Eremin
Проблемы с индексацией в Google как решить

Автор Stasweb

Ответов: 1
Просмотров: 613
Последний ответ 09.10.2015, 06:59:02
от Stasweb