BigAp.ru — интернет-магазин электроники и бытовой техники

Автор Тема: Как скрыть страницы от индексации Google?  (Прочитано 671 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн DaRoni

  • Специалист ИТ
  • ****
  • Сообщений: 302
  • Karma: +22/-0
  • Пол: Мужской
    • Share Post
CMS Joomla! 3.5.1
В выдаче гугла присутствуют ссылки на страницы
Забыли логин? - ***
https://***.kz/component/users/?view=remind
Забыли пароль? - ***
https://***.kz/component/users/?view=reset
как их можно скрыть?
погулил пару недель назад и добавил в robots.txt строчку
Disallow: /component/users/  для User-agent: *
Но результата от этого нет,регистрация отключена в самой джумле.
Спойлер
# If the Joomla site is installed within a folder such as at
# e.g. www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. www.example.com/robots.txt
# AND the joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/orig.html
#
# For syntax checking, see:
# http://tool.motoricerca.info/robots-checker.phtml

User-agent: *
Disallow: /administrator/
Disallow: /bin/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Disallow: /modules/
Disallow: /plugins/
Disallow: /tmp/
Disallow: /component/users/
[свернуть]

« Последнее редактирование: Май 17, 2016, 02:40:16 pm от sysadmin »

 

Оффлайн sysadmin

  • Administrator
  • сисадми́н
  • *****
  • Сообщений: 8576
  • Karma: +117/-0
  • Пол: Мужской
    • Share Post
    • сайт для сис. админов и не только...
Re: Как скрыть страницы от индексации Google?
« Ответ #1 : Май 17, 2016, 02:54:08 pm »
Возможно в какой то момент или по каким либо причинам robots.txt не считался поисковиком, этот файл открывается в браузере, этот файл добавлен в панели вебмастера googe?

Так же ты можешь исключить из поиска URL принудительно, указав, что именно необходимо удалить, у Google на этот счет есть свои инструменты:
https://www.google.com/webmasters/tools/url-removal
https://www.google.com/webmasters/tools/removals

Так же ты можешь удалить URL в панели web мастера google - Google index - remove URLs
дорогу осилит идущий...
......................
MCP, MCTS, RHCSA
......................
also aka xck...

Оффлайн DaRoni

  • Специалист ИТ
  • ****
  • Сообщений: 302
  • Karma: +22/-0
  • Пол: Мужской
    • Share Post
Re: Как скрыть страницы от индексации Google?
« Ответ #2 : Май 17, 2016, 11:48:25 pm »
Google последний раз сканировал robots.txt 9 числа, а 10 числа я уже изменил файл(как оказалось пару недель ещё не прошло  :ggg:), возможно нужно было подождать чуть больше времени.
На счёт запроса на удаление, оно там временно удаляет, но запрос отправил.
За одно разобрался с sitemap, и отсюда же скачал Xmap Package. Спасибо!


xx
[Решено] Google Chrome - делаем поисковик google.com поисковиком по умолчанию

Автор xck

0 Ответов
3490 Просмотров
Последний ответ Февраль 05, 2012, 07:45:34 pm
от xck
moved
Перенесено: Google Chrome - делаем поисковик google.com поисковиком по умолчанию

Автор sysadmin

0 Ответов
6 Просмотров
Последний ответ Февраль 15, 2014, 09:17:49 pm
от sysadmin
xx
[Решено] Переключить Google Chrome на поисковик Google из другой страны?

Автор sysadmin

1 Ответов
1548 Просмотров
Последний ответ Сентябрь 01, 2014, 09:05:24 pm
от sysadmin
xx
Распаковать архив zip / rar не скачивая c Google Drive (Google диска)

Автор Celtic257

17 Ответов
5469 Просмотров
Последний ответ Январь 16, 2016, 09:28:28 pm
от sysadmin