https://search.google.com/search-console
Сегодня проверил google search-console и обнаружел в нем такой параметр - Проиндексировано, несмотря на блокировку в файле robots.txt
Как к этому относится?
Индексирует страницы с такими адресами:
viewtopic.php?p=5355 viewtopic.php?p=5355
viewtopic.php?f=9&t=83&p=5101 viewtopic.php?t=83&p=5101
google search-console индексирует запрещенные в robots.txt
Правила форума
Если ваш вопрос касается работы или настройки какого-либо расширения, задайте пожалуйста вопрос в разделе "Расширения" в теме, посвященной этому расширению.
Если ваш вопрос об оформлении, то для этого есть разделы "Оформление форумов" и "Стили для вашего форума".
Вместе мы сделаем этот форум удобным и полезным!
Спасибо!
Если ваш вопрос касается работы или настройки какого-либо расширения, задайте пожалуйста вопрос в разделе "Расширения" в теме, посвященной этому расширению.
Если ваш вопрос об оформлении, то для этого есть разделы "Оформление форумов" и "Стили для вашего форума".
Вместе мы сделаем этот форум удобным и полезным!
Спасибо!
-
- Администратор
- Сообщения: 1462
- Зарегистрирован: 02 янв 2015, 08:15
- Откуда: Владивосток
- Благодарил (а): 51 раз
- Поблагодарили: 542 раза
- Пол:
- Контактная информация:
google search-console индексирует запрещенные в robots.txt
Судя по этой штуке:
https://support.google.com/webmasters/a ... 0203?hl=ru Гугл решает игнорировать robots.txt из-за того, что где-то есть внешняя ссылка именно на эту страницу.
Там-же есть рекомендация использовать noindex, но лично я предполагаю, что гугл "намекает", что эта эта страница увеличивает полезную ссылочную массу для всего сайта, возможно лучше оставить как есть...
PS. Весь вопрос в том, включает ли google во внутренний поиск такую страницу или просто дает предупреждение...
https://support.google.com/webmasters/a ... 0203?hl=ru Гугл решает игнорировать robots.txt из-за того, что где-то есть внешняя ссылка именно на эту страницу.
Там-же есть рекомендация использовать noindex, но лично я предполагаю, что гугл "намекает", что эта эта страница увеличивает полезную ссылочную массу для всего сайта, возможно лучше оставить как есть...
PS. Весь вопрос в том, включает ли google во внутренний поиск такую страницу или просто дает предупреждение...
Поддержка GetBB.Ru
Бесплатный хостинг форумов PHPBB3
Ваши собственные домены с привязкой к форуму:
.ru - 200 руб./год , .рф - 250 руб./год. (кирилический домен)
in.ua - 7$/год. , .com,org,net - 12$/год.
Бесплатный хостинг форумов PHPBB3
Ваши собственные домены с привязкой к форуму:
.ru - 200 руб./год , .рф - 250 руб./год. (кирилический домен)
in.ua - 7$/год. , .com,org,net - 12$/год.
-
- Сообщения: 789
- Зарегистрирован: 03 янв 2015, 10:04
- Благодарил (а): 34 раза
- Поблагодарили: 290 раз
- Пол:
- Контактная информация:
google search-console индексирует запрещенные в robots.txt
Например В реальности тема называется Карты gta 4 и имеет адрес viewtopic.php?f=12&t=26, канонический viewtopic.php?t=26 а ссылка viewtopic.php?p=42#p42 ведет на первое сообщение в теме.