Как предотвратить индексацию сайта поисковиками

Каким бы странным это не казалось, но иногда для поисковой оптимизации необходимо предотвратить индексацию сайта поисковиком. Это может понадобиться, если на сайте имеется множество страниц с одинаковым контентом или же просто нужно оставить какую-либо страницу с информацией предназначенной только для определенной группы лиц (страница с промо-кодами и пр.) и еще множество других случаев. Ниже приведены пару методов, которые помогут вам предотвратить индексацию сайта поисковиками.


Самый простой способ – это принудительный запрет индексации в самом файле для поискового робота Robots.txt. Отредактировав этот файл строчкой запрета индексации, и поместив его в корень сайта, поможет отключить доступ поисковым паукам к сайту, определенным файлам или папкам. Для упрощения процесса в нем можно даже написать шаблоны адресов, это понадобится, если вам нужно запретить доступ поисковику к большому количеству файлов (картинок, гифок и т.д.) с одинаковыми тегами.  Этот метод – отличный способ защитить необходимый контент от индексации не нанеся при этом никакого ущерба опыту пользователя на вашем сайте. Все новые пользователи не найдут спрятанный контент, используя поисковые запросы, а старые, по прежнему, сохранят к нему свой доступ.

Еще один способ по предотвращению индексации сайта поисковиками – это активация метатега noindex. Во время использования постраничной индексации, тег предназначенный для роботов noindex является обязательным правилом для пропуска индексации сайта. В отличие от предыдущего способа, нельзя оградить выбранные файлы или папки, но можно исключить из индексации любую выбранную страницу. Обратите внимание, что метатег noindex нужно обязательно объединять с командой nofollow, в противном случае, поисковики, по-прежнему, смогут получать информацию об этой странице. После исключения из индексации страниц этим способом, поиск останется доступным только для тех страниц, которые не были исключены. На сам процесс работы пользователей с вашим сайтом эта блокировка никак не повлияет. Поисковики не смогут привлекать новых пользователей на закрытые страницы, но старые по-прежнему беспрепятственно смогут их посещать.


Существуют и другие способы по предотвращению индексации сайта поисковиками, но они более сложные и имеют ряд побочных действий для SEO вашего сайта в целом.

Немного рекламы :)

Copyright, design, ideas © Mihail. При копировании материалов, ссылка на сайт "Seozar.ru" обязательна. Контакты - admin@halych.ru
Тариф «Первый»: 2 сайта, 1 Гб, 2 MySQL, 2 FTP