Совет 1: Как удалить страницу в поисковике

Иногда веб-мастеру требуется удалить из поисковой системы одну из проиндексированных страниц. Чаще всего к данной операции прибегают после ошибочного занесения адреса страницы в общий список карты сайта. В свое время с этой ошибкой столкнулись специалисты компании Мегафон (sms-сообщения стали доступны любому пользователю поисковой системы «Яндекс»).
Вам понадобится
  • Личный сайт.
Инструкция
1
Один из самых простых способов удаления собственной веб-страницы из архивов поисковых систем заключается в ее физическом удалении, смене адреса расположения и ложного удаления (нужно задать атрибут удаленной страницы). После преобразования данной страницы поисковый робот вместо содержимого увидит следующую строку: HTTP/1.1 404 Not Found. Однако не стоит забывать о том, что поисковые роботы могут заходить на сайт каждые 3 часа, а могут и раз в 2-3 дня. Поэтому необходимо выждать некоторое время, чтобы получить результат.
2
Следующий способ заключается в редактировании файла robots.txt, который определяет путь поискового робота, как только он зашел на ваш сайт. Этот текстовый документ всегда имеет одно расположение — корень сайта. В первом абзаце обычно указывают параметры индексации для Яндекс-робота (он заметно отличается от других роботов), во втором абзаце для всех остальных поисковых систем.
3
В начале абзаца необходимо указать заголовок агента "User-Agent: *" и адреса страниц, которые необходимо скрыть — "Disallow: /wp-content/foto/fotojaba.html". Таким же образом необходимо указать адреса страниц или разделов, которые вы хотите закрыть от индексации. Имейте ввиду, что данный способ не позволяет получить быстрых результатов. Если на вашем сайте низкая активность и новости не транслируются в социальные сети, обработка новых данных может достигать срока в несколько дней. К тому же, понадобится удалить версии этих страниц из архива поисковой службы.
4
Альтернативным вариантом метода прописывания ссылок в файле robots.txt является использование одноименного мета-тега robots. Синтаксис этого тега будет следующим: его необходимо размещать между парными тегами [head] и [/head]. Значение robots нужно размещать в теге meta name. Пример будет выглядеть следующим образом: <meta name="robots" content="noindex,nofollow" />.

Совет 2: Как удалить сайт из поисковика

Многие владельцы интернет-сайтов сталкиваются с проблемой запрещения индексации ресурсов и их удаления из поисковых систем. Обычно это происходит потому, что сайт становится устаревшим и неактуальным, веб-мастер или посетители теряют к сайту интерес или же сайт содержит личную и даже конфиденциальную информацию.
Инструкция
1
Существует множество способов удаления сайта из поисковых систем.

Первый и самый простой из способов удаления результатов запросов из ПС – удаление страницы с самого сайта или полное удаление CMS сайта через FTP-соединение. Через несколько дней поисковая система сделает апдейт базы и удалит ссылку на ваш ресурс из результатов поиска.
2
Самый популярный среди веб-мастеров способ защитить от индексации сайт, отдельные его разделы или страницы, и тем самым выбросить ссылки из результатов поиска – это редактирование файла robots.txt.

Закрыть отдельную страницу от индексации можно, воспользовавшись кодом:

User-Agent: *
Disallow: /page.html (закрытие страницы page.html)

В интернете существует множество авторских инструкций по применению кодов для файла robots.txt.
3
Третий способ удалить страницы сайта из поисковых систем – использовать мета-тег robots в его страницах. Тег прописывается в HTML-коде скрываемых страниц между тегами .



Таким образом, после переиндексации сайта ПС, страницы с данным мета-тегом выпадут из поиска. Недостаток данного метода в том, что многие современные сайты используют tpl-шаблоны, а это значит, что придется изменять код вручную сотням, а может и тысячам страниц.
4
Четвертый способ удаления сайтов из поисковых систем – использование заголовков X-Robots-Tag. Суть этого заголовка похожа на использование предыдущего мета-тега, однако запись должна быть расположена в http-заголовках:

X-Robots-Tag: noindex, nofollow
5
Самый эффективный способ удаления сайта (целиком) из поисковых систем – это его удаление из панели вебмастера. После апдейта (3-7 дней) сайт будет недоступен для поисковой системы. Панель вебмастера доступна для поисковиков Яндекс (http://webmaster.yandex.ru/delurl.xml) и Google (http://webmaster.yandex.ru/delurl.xml).
Поиск
Совет полезен?
Добавить комментарий к статье
Осталось символов: 500