Запрет индексации в Google

  • Автор темы Edi
  • Дата начала

Edi

Новичек
Пользователь
Регистрация
22/3/14
Сообщения
25
Симпатии
1
Возраст
37
#1
Здраствуйте уважаемые коллеги! Всем известно, что страница сайта, должна быть доступна только лишь по 1 адресу, а все остальное скрывается, от индексации, делается редиректы и т. д.
Как правило, люди скрывают не нужные разделы сайта в robots.txt. Для Яндекса, это очень хорошо действует, но это я не могу сказать о Google. Точнее действует и в Гугл, но не очень. Сейчас объясню почему.

17-2014_12.jpg

На скрине выше, выделен результат, от запрета индексации в Google. Как сделать, чтобы этих страниц, совсем не было в индексе?[DOUBLEPOST=1406289647][/DOUBLEPOST]Не знаю, вредят ли такие страницы ранжированию сайта в поисковых системах, или нет, но хотелось бы все таки чтобы их не было в индексе.

PS. Сайт в примере - не мой. Взял, первый попавшийся.
 

WebBiz

Вождь
Член команды
Администратор
Регистрация
11/3/14
Сообщения
1.313
Симпатии
178
Возраст
27
#2
Эти страницы, можно удалить в кабинете для вебмастеров от Google. Но этот способ не самый лучший. Со временем, эти самые страницы, снова появляться в индексе.
Я например на страницах, которые не нужно индексировать, прописываю в теге <head>, следующий код:
HTML:
<meta name="robots" content="noindex, nofollow"/>
Этот код "приказывает" поисковикам, не индексировать содержимое страницы, и не переходить по ссылкам на этой странице.
 

Edi

Новичек
Пользователь
Регистрация
22/3/14
Сообщения
25
Симпатии
1
Возраст
37
#4
WebBiz, А этот способ точно работает?
 

WebBiz

Вождь
Член команды
Администратор
Регистрация
11/3/14
Сообщения
1.313
Симпатии
178
Возраст
27
#5
А этот способ точно работает?
На своем сайте, этот код поставил, только несколько дней тому назад. Поэтому - ничего определенно не могу говорить. Но пока еще, все идет, как я думал. А-а-а также, в ручном режиме, через панель вебмастеров, удалил не нужные страницы.
 

Максим Саенко

Прописан на форуме
Член команды
Модератор
Регистрация
22/7/14
Сообщения
83
Симпатии
29
Возраст
38
#6
Эти страницы, можно удалить в кабинете для вебмастеров от Google. Но этот способ не самый лучший. Со временем, эти самые страницы, снова появляться в индексе.
Я например на страницах, которые не нужно индексировать, прописываю в теге <head>, следующий код:
HTML:
<meta name="robots" content="noindex, nofollow"/>
Этот код "приказывает" поисковикам, не индексировать содержимое страницы, и не переходить по ссылкам на этой странице.
хорошо... а если CMS от
Код:
<html>
.......
</html>
использует один и тот же шаблон!? Ну... типа
Код:
<html>
<link href="" rel="">
<body>
<?php include('тело_сайта'); ?>
</body>
</html>
тогда как прописать для неиндексируемых страниц роботс.тхт???
При чем страницы имеют свойство добавляться и обновляться... и каждый раз в robots.txt добавлять новые страницы!?? Или как?!??
 

WebBiz

Вождь
Член команды
Администратор
Регистрация
11/3/14
Сообщения
1.313
Симпатии
178
Возраст
27
#7
Максим Саенко, Все достаточно легко делается. Нужен конкретный пример. Но в robots.txt можно все скрыть, что нужно. Вот объяснение, от яндекса:
Код:
https://help.yandex.ua/webmaster/controlling-robot/robots-txt.xml
 

Максим Саенко

Прописан на форуме
Член команды
Модератор
Регистрация
22/7/14
Сообщения
83
Симпатии
29
Возраст
38
#8
Максим Саенко, Все достаточно легко делается. Нужен конкретный пример. Но в robots.txt можно все скрыть, что нужно. Вот объяснение, от яндекса:
Код:
https://help.yandex.ua/webmaster/controlling-robot/robots-txt.xml
хорошо... вот конкретный пример shlak-shceben-pesok.dp.ua
 

WebBiz

Вождь
Член команды
Администратор
Регистрация
11/3/14
Сообщения
1.313
Симпатии
178
Возраст
27
#9
вот конкретный пример shlak-shceben-pesok.dp.ua
Что здесь нужно запретить к индексации? Я так понял, что сайт на html? Если да, то здесь 2 варианта:

1. Запрещать каждую не нужную страницу в роботос
2. На каждой, которая не должна индексироваться, прописать это:
HTML:
<meta name="robots" content="noindex, nofollow"/>
 

Максим Саенко

Прописан на форуме
Член команды
Модератор
Регистрация
22/7/14
Сообщения
83
Симпатии
29
Возраст
38
#10
сайт на KandidatCMS, он не использует БД, но если прописывать это в шаблоне самого сайта, то запись
Код:
<meta name="robots" content="noindex, nofollow"/>
будет распростаняться на все страницы... а вот как выделить отдельные?!??
 

WebBiz

Вождь
Член команды
Администратор
Регистрация
11/3/14
Сообщения
1.313
Симпатии
178
Возраст
27
#11
будет распростаняться на все страницы... а вот как выделить отдельные?!??
Я думаю, что в этом случае, может помочь только robots, но не могу быть уверенным на 100 %, так как подобную CMS - никогда не использовал.
 

Максим Саенко

Прописан на форуме
Член команды
Модератор
Регистрация
22/7/14
Сообщения
83
Симпатии
29
Возраст
38
#12
Я думаю, что в этом случае, может помочь только robots, но не могу быть уверенным на 100 %, так как подобную CMS - никогда не использовал.
а вот попробуйте... ничего там сложного нет.... может подскажите что-то
 

WebBiz

Вождь
Член команды
Администратор
Регистрация
11/3/14
Сообщения
1.313
Симпатии
178
Возраст
27
#13

WebBiz

Вождь
Член команды
Администратор
Регистрация
11/3/14
Сообщения
1.313
Симпатии
178
Возраст
27
#15
Последнее редактирование: